LLM2D
带有3D扩散先验的实 tekstured 3D再生形变
Textured 3D Regenerative Morphing with 3D Diffusion Prior
作者: Songlin Yang, Yushi Lan, Honghua Chen, Xingang Pan
发布日期: 2/21/2025
arXiv ID: oai:arXiv.org:2502.14316v1

摘要

arXiv:2502.14316v1 文本类型: cross 摘要: 文本化3D形变在两个3D对象之间创建平滑且合理的时间插值序列,不仅关注形状的过渡,也关注纹理的过渡。这对于电影制作中的视觉效果等创意应用非常重要。先前的方法依赖于建立点对点对应关系并确定平滑变形轨迹,这本身限制它们只能在无纹理且拓扑对齐的数据集上进行形状的形变。这种限制导致了劳 动密集型的预处理和较差的一般泛化性能。为克服这些挑战,我们提出了一种使用3D扩散先验的3D再生形变方法。与依赖显式对应关系和形变的先前方法不同,我们的方法消除了获取对应关系的额外需求,并利用3D扩散先验生成形变。具体而言,我们引入了一个3D扩散模型,并在三个层次上插值源和目标信息:初始噪声、模型参数和条件特征。然后我们探索了一种注意力融合策略以生成更平滑的形变序列。为了进一步提高语义插值和生成的3D表面的合理性,我们提出了两种策略:(a) 令牌重排序,我们基于语义分析匹配近似令牌以在扩散模型的去噪过程中引导隐式对应关系;(b) 低频增强,我们增强令牌中的低频信号以改进生成表面的质量。实验结果表明,我们的方法在多种跨类别对象对的3D形变中实现了更优越的平滑度和合理性,提供了一种使用纹理表示的新颖再生形变方法。