arXiv:2502.09614v1 交叉公告类型 摘要：我们致力于从人类参考中开发一种通用的神经跟踪控制器，用于灵巧操作。该控制器旨在管理灵巧的机器人手部，使其能够对通过人类-物体动力学定义的各种目的进行操作。由于灵巧操作的复杂接触动力学以及适应性、通用性和鲁棒性的需求，开发这样的控制器变得相当复杂。当前的强化学习和轨迹优化方法往往由于依赖于特定任务的奖励或精细的系统模型而难以实现。我们提出了一种方法，即精心策划大规模成功的机器人跟踪示范，包括人类参考和机器人动作的成对数据，用于训练神经控制器。利用数据飞轮，我们迭代提高控制器的性能，以及成功的跟踪示范的数量和质量。我们利用可用的跟踪示范，并仔细将强化学习和模仿学习结合起来，以在动态环境中提高控制器的性能。与此同时，为了获得高质量的跟踪示范，我们通过一种同调优化方法单独优化每个轨迹的跟踪，利用学习到的跟踪控制器。同调优化类似于思维链的方法，有助于解决复杂的轨迹跟踪问题，增加示范的多样性。我们通过在仿真和现实世界中训练通用的神经控制器并进行评估，展示了我们的成功。我们的方法在成功率方面相对于领先基准提高了10%以上。关于该项目的网站有动画结果展示，网址为https://meowuu7.github.io/DexTrack/。