LLM2D
ReactDance:渐进细粒度表示长期连贯反应舞蹈生成
ReactDance: Progressive-Granular Representation for Long-Term Coherent Reactive Dance Generation
作者: Jingzhong Lin, Yuanyuan Qi, Xinru Li, Wenxuan Huang, Xiangfeng Xu, Bangyan Li, Xuejiao Wang, Gaoqi He
发布日期: 5/12/2025
arXiv ID: oai:arXiv.org:2505.05589v1

摘要

arXiv:2505.05589v1 交叉类型公告 摘要:反应型舞蹈生成(RDG)根据引导舞者和音乐生成跟随者的动作,同时确保空间协调和时间一致性。然而,现有的方法过度强调全局约束和优化,忽视了局部信息,例如细粒度的空间交互和局部的时间上下文。因此,我们提出了ReactDance,这是一种用于高保真RDG的新颖的基于扩散的框架,具有长期一致性及多尺度可控性。不同于现有的方法在伴侣合成中难以处理交互保真度、同步以及时间一致性问题,我们的方法引入了两个关键创新:1)组残差有限标量量化(GRFSQ),这是一种多尺度解耦动作表示,能够从粗粒度的身体节奏到细粒度的关节动力学捕获交互语义,2)块局部上下文(BLC),这是一种采样策略,通过局部块因果屏蔽和周期位置编码消除长序列生成中的误差累积。基于解耦的多尺度GRFSQ表示,我们实现了具有层解耦无分类指导(LDCFG)的扩散模型,允许在不同尺度上对动作语义进行精细控制。在标准基准上的大量实验表明,ReactDance超越了现有方法,实现了最先进的性能。