arXiv:2502.01932v2 宣布类型: 替换交叉 摘要：多智能体强化学习（MARL）取得了显著进步，主要得益于专门测试床的发展，这些测试床能够在受控而又具有挑战性的情景中系统地评估算法。然而，现有的测试床往往侧重于纯粹的虚拟模拟或受限的机器人形态，如机械臂、四足机器人和类人机器人，而忽视了像无人机这类具有高机动性和现实物理限制的平台。为了解决这一问题，我们提出了VolleyBots，一个新的MARL测试床，多个无人机在物理动态下协作和竞争在排球运动中。VolleyBots 包含根据排球规则的轮换交互模型、结合运动控制和战术玩法的分层决策过程以及高度真实的模拟，以实现无缝的仿真到现实世界的转换。该测试床提供了从单无人机训练任务到多无人机协作和竞争任务的全面任务集，并附带代表性的MARL和博弈论算法的基本评估。仿真结果显示，现有算法在处理简单任务时表现出色，但在需要低级控制和高级策略的复杂任务中遇到困难。我们进一步展示了从仿真中学习的策略在真实世界无人机上的零样本部署，突显了VolleyBots 在涉及敏捷机器人平台的MARL研究方面的潜力。项目页面位于 https://sites.google.com/view/thu-volleybots/home。