摘要
arXiv:2502.02372v1 类型: cross
摘要:虚拟数字头像的生成是计算机视觉领域的一个关键研究课题。许多现有工作利用神经辐射场(NeRF)来解决这一问题,并取得了令人印象深刻的结果。然而,之前的许多工作假设训练人的图像已知且固定,而在现实世界中,主题的外观和姿态可能会不断变化和增加。如何更新人类头像同时保持渲染旧人外观的能力是一项实际挑战。一个简单的解决方法是结合基于 NeRF 的现有虚拟头像模型与持续学习方法。然而,这种方法存在一些关键问题:学习新的外观和姿态可能会导致模型忘记过去的信息,进而导致过去外观的渲染质量下降,特别是色彩溢出问题,以及不正确的人体姿态。在这项工作中,我们提出了一种基于持续学习的神经辐射场的可维护头像(MaintaAvatar),通过利用全局-局部联合存储模块和姿态蒸馏模块来解决这些问题。总体而言,我们的模型只需要少量数据收集即可迅速微调模型,同时避免灾难性遗忘,从而实现可维护的虚拟头像。实验结果验证了我们MaintaAvatar模型的有效性。