LLM2D
组合神经纹理
Compositional Neural Textures
发布日期: 9/24/2024
arXiv ID: oai:arXiv.org:2404.12509v2

摘要

摘要:纹理在增强真实照片和计算机生成图像的视觉丰富性方面起着至关重要的作用。然而,编辑纹理的过程通常涉及对纹理特征的繁琐且重复的手动调整,这些特征是构成纹理的重复局部模式。本文介绍了一种完全无监督的方法,使用组合神经模型来表示纹理,该模型捕捉单个纹理特征。我们将每个纹理特征表示为二维高斯函数,其空间支持近似其形状,以及编码其详细外观的相关特征。通过将纹理建模为高斯纹理特征的离散组合,这种表示既具有表现力又易于编辑。可以通过在潜在空间中修改组合高斯来编辑纹理,并且可以通过前馈方式将修改后的高斯输入生成网络来高效地合成新纹理。这种方法支持广泛的应用,包括将图像纹理的外观转移到另一张图像上、丰富纹理、纹理插值、揭示/修改纹理变化、编辑传播、纹理动画以及直接纹理特征操作。所提出的方法有助于推进纹理分析、建模和编辑技术,并开辟了创建具有可控纹理的视觉上吸引人的图像的新可能性。