arXiv:2505.07813v1 类别: 集分类 摘要: 大规模、多样化的机器人数据集已成为使灵巧操作策略能够泛化到新环境的一种有前途的方法，但获取这些数据集面临许多挑战。尽管远程操作可以提供高保真度的数据集，但其高昂的成本限制了其可扩展性。那么，如果人们可以使用自己的手，就像在日常生活中那样来收集数据呢？在DexWild中，一个多样化的数据收集团队使用他们的手在多种环境和物体之间收集了大量的交互数据。为了记录这些数据，我们创建了DexWild-System，一种低成本、便携且易于使用的设备。DexWild学习框架在人类演示和机器人演示中共同训练，这使得它在单独训练每个数据集时的表现更好。这种组合导致了鲁棒性强的机器人策略，能够在最少的机器人特定数据附加下泛化到新的环境、任务和化身。实验结果表明，DexWild显著提高了性能，在未见过的环境中取得了68.5%的成功率，几乎是仅使用机器人数据训练的策略成功率的四倍，并提供了5.8倍更好的跨化身泛化。更多信息、视频结果、代码库和使用说明见https://dexwild.github.io