arXiv:2409.14393v1 公告类型: 新提交 摘要: 打造一个单一、多功能的基于物理的控制器，能够在广泛场景中赋予交互角色生命，代表了角色动画领域的一个激动人心的前沿。理想的控制器应支持多种控制模式，如稀疏目标关键帧、文本指令和场景信息。尽管先前的工作提出了基于物理模拟、场景感知的控制模型，但这些系统主要专注于开发各自专长于狭窄任务和控制模式的控制器。本文提出了MaskedMimic，一种将基于物理的角色控制表述为通用运动修复问题的新方法。我们的关键见解是训练一个单一的统一模型，从部分（掩码）运动描述中合成运动，如掩码关键帧、对象、文本描述或其任意组合。通过利用运动跟踪数据并设计一种可扩展的训练方法，我们能够有效利用多样化的运动描述生成连贯的动画。通过这一过程，我们的方法学习了一个基于物理的控制器，提供了一个直观的控制界面，无需为所有感兴趣的行为进行繁琐的奖励工程。最终的控制器支持广泛的控制模式，并实现不同任务之间的无缝过渡。通过将角色控制统一为运动修复，MaskedMimic创造了多功能的虚拟角色。这些角色能够动态适应复杂场景，并按需组合多样化的运动，从而实现更互动和沉浸的体验。