摘要
arXiv:2502.15425v1 人工智能系统公告类型: 新
摘要:分层组织是生物系统和人类社会的基础,但人工智能系统经常依赖于缺乏适应性和扩展性的单一架构。当前的层次强化学习(HRL)方法通常限制层次结构为两层或需要集中训练,这限制了它们的实际应用。我们引入了TAME智能体框架(TAG),这是一种构建完全去中心化层次多智能体系统的框架。TAG 通过一个新颖的 LevelEnv 概念,将每个层次作为上方智能体的环境来实现任意深度的层次结构。这种方法标准化了层次之间的信息流,同时保持松耦合,允许无缝集成各种智能体类型。我们通过实现结合多个层次不同RL智能体的层次架构证明了TAG的有效性,在标准基准上,TAG实现了比经典多智能体RL基线更好的性能。我们的结果显示,去中心化的层次组织不仅提高了学习速度,还提高了最终性能,将TAG定位为可扩展多智能体系统的一个有Hope的研究方向。