arXiv:2502.01932v1 交叉公告类型 摘要：多代理强化学习(MARL)已经取得了显著进步，主要得益于专门的试验平台的发展，这些平台使算法能够在受控但具有挑战性的场景中进行系统的评估。然而，现有的试验平台往往侧重于纯粹的虚拟仿真或有限的机器人形态，如机械臂、四足机器人和类人机器人，而忽视了受到现实物理限制的高机动平台，如无人机。为了解决这一差距，我们介绍了VolleyBots，一个新的MARL试验平台，其中多个无人机在物理动态下合作并在排球比赛中竞争。VolleyBots集成了排球规则下的轮换交互模型、结合运动控制和策略制定的分层决策过程，以及高度保真的仿真以实现无缝的仿真到现实的转移。我们提供了一系列任务，从单无人机的训练到多无人机的合作和竞争任务，还提供了代表性的MARL和博弈论算法的基准评估。在仿真中的结果显示，现有算法在处理简单的任务时很有效，但在需要低级控制和高级策略的任务中却遇到了困难。我们进一步展示了从模拟中学到的策略在现实世界无人机上的零样本部署，突显了VolleyBots在涉及敏捷机器人平台的MARL研究方面的潜力。项目页面位于https://sites.google.com/view/volleybots/home。