摘要
arXiv:2312.11535v3 生成类型:替换-交叉
摘要:在本文中,我们通过提出一种新颖的两阶段方法来生成从单张图片中高质量的3D模型,从而解决了由多元3D数据稀缺性引起的机器人领域的关键瓶颈。这种方法的动机在于高效地扩展3D资产的创建,特别对于机器人数据集而言,目前物体类型与一般图片数据集相比仍然有限。不同于以往主要依赖于通用扩散先验的方法,这些方法往往难以与参考图片对齐,我们的方法利用了专门的先验知识。通过在几何和纹理中整合专门的先验知识,我们确保生成的3D内容与参考对象精确对齐。具体而言,我们在NeRF优化过程中引入了一种 shading 模式感知先验,增强了几何并细化粗糙输出的纹理以获得更高质量的结果。广泛的实验表明,我们的方法显著优于之前的诸多方法。