arXiv:2403.09326v4 通知类型: replace-cross 摘要：当前的文本到Avatar方法往往依赖于隐式表示（例如，NeRF、SDF和DMTet），这导致了艺术家在图形软件中难以编辑和动画的3D内容。本文提出了一种新颖的框架，从文本指导生成风格化的头部Avatar，该框架利用局部可学习网格变形和二维扩散先验，以实现具有属性保持变换的高质量数字资产。给定一个模板网格，我们的方法使用每个面的雅可比矩阵来表示网格变形，并通过一个可学习的向量场自适应地调节局部变形。该向量场可以在保持顶点旋转的同时实现各向异性缩放，从而更好地表达身份和几何细节。我们采用基于关键点和轮廓的正则化项来平衡多视角生成的Avatar的表达性和合理性，而无需依赖任何特定的形状先验。我们的框架可以生成真实的形状和纹理，这些纹理可以通过文本进一步编辑，同时支持通过模板网格保留的属性进行无缝编辑，例如3DMM参数、混动形状和UV坐标。广泛的实验表明，我们的框架可以生成多样化且富有表现力的头部Avatar，拥有高质量的网格，艺术家可以在图形软件中轻松编辑，有助于下游应用，如高效资产创造和保留属性的动画。