LLM2D
合作多代理 reinforcement learning 中的复合任务挑战
The Composite Task Challenge for Cooperative Multi-Agent Reinforcement Learning
作者: Yurui Li, Yuxuan Chen, Li Zhang, Shijian Li, Gang Pan
发布日期: 2/4/2025
arXiv ID: oai:arXiv.org:2502.00345v1

摘要

arXiv:2502.00345v1 类型: cross 摘要:分工(DOL)在促进合作中的重要作用在实际应用中得到了广泛认可。许多协同多智能体强化学习(MARL)方法已经引入了DOL的概念,以提高智能体之间的合作。然而,目前用于测试的大多数任务通常不需要DOL即可实现最优策略。此外,由于缺乏合适的任务,DOL概念在MARL方法中的充分利用仍未能实现。为了增强MARL方法在实际场景中的通用性和适用性,有必要开发出需要多智能体分工与合作的任务。在本文中,我们提出了一系列旨在满足这些要求的任务,这些任务的设计以现实世界的规则为指导。我们保证DOL和合作是完成任务的必要条件,并引入了三个因素来扩展所提任务的多样性,以涵盖更多的现实情况。我们对提出的任务进行了10种协同MARL方法的评估。结果表明,所有基线方法在这种任务中表现不佳。为了进一步验证这些任务的可解性,我们还提出了所提任务的简化版本。实验结果表明,基线方法能够处理这些简化版本,为所提任务的可解性提供了证据。源代码可在https://github.com/Yurui-Li/CTC获得。