摘要
arXiv:2502.02372v1 类型: cross
摘要:虚拟数字 avatar 的生成是计算机视觉领域的一个关键研究主题。许多现有工作利用神经辐射场(NeRF)来解决这一问题,并取得了令人印象深刻的成果。然而,这些先前的工作假设训练人员的图像可用且固定,而在现实世界中,主题的外观和姿势会不断变化和增加。如何更新人类 avatar 并同时保持渲染旧人像外观的能力是一个实际挑战。一个简单的解决方案是结合基于 NeRF 的现有虚拟 avatar 模型与连续学习方法。然而,这种方法存在一些关键问题:学习新的外观和姿势会导致模型忘记过去的信息,从而导致对过去外观渲染质量的下降,特别是在颜色外溢问题和错误的人体姿态方面。在本文中,我们提出了一种基于连续学习的神经辐射场的可维护 avatar(MaintaAvatar),通过使用全局-局部联合存储模块和姿态蒸馏模块解决了这些问题。总体而言,我们的模型只需要少量的数据收集就能快速微调模型,同时避免灾难性遗忘,从而实现了可维护的虚拟 avatar。实验结果验证了我们 MaintaAvatar 模型的有效性。