arXiv:2502.01932v1 类别: cross 摘要：多智能体强化学习（MARL）取得了显著进展，这主要是由于专门的测试床的发展，这些测试床在可控且富有挑战性的场景中系统地评估了算法。然而，现有的测试床往往侧重于纯粹的虚拟模拟或有限的机器人形态，如机械臂、四足机器人和类人形机器人，而对具有现实物理约束的高移动性平台，如无人机，则研究不足。为了弥合这一差距，我们提出了VolleyBots，这是一个新的MARL测试床，其中多个无人机在物理动力学条件下进行排球比赛的合作与竞争。VolleyBots 特点包括遵循排球规则的回合制交互模型、结合运动控制与战略决策的分层决策过程以及高保真模拟，以便无缝实现从模拟到现实的转换。我们提供了一系列任务，从单无人机训练到多无人机的协作与竞争任务，还提供了代表性MARL和博弈理论算法的基本评估。在模拟中的结果显示，现有算法在处理简单任务时表现良好，但在需要低级控制和高级策略的任务中却遇到困难。进一步展示了从模拟学到实际部署的零样本部署策略，突显了VolleyBots 在促进涉及敏捷机器人平台的MARL研究方面的潜力。项目页面位于 https://sites.google.com/view/volleybots/home。