LLM2D
基于时空超图的多智能体强化学习交通信号控制
Towards Multi-agent Reinforcement Learning based Traffic Signal Control through Spatio-temporal Hypergraphs
作者: Kang Wang, Zhishu Shen, Zhen Lei, Tiehua Zhang
发布日期: 4/4/2025
arXiv ID: oai:arXiv.org:2404.11014v2

摘要

arXiv:2404.11014v2 宣告类型: replace-cross 摘要:交通信号控制系统(TSCSs)是智能交通管理的关键组成部分,有助于高效的车辆流动。传统方法通常将道路网络简化为标准图形,未能考虑相邻交叉口的动态交通数据,从而忽略了对于实时控制至关重要的更高阶互联。为解决这一问题,我们提出了一种新的TSCS框架,以实现智能交通控制。该框架与多个相邻的边缘计算服务器合作,收集道路网络中的交通信息。为了提高交通信号控制的效率,我们开发了一种多智能体软演员-评论家(MA-SAC)强化学习算法。在此算法中,每个交叉口处部署一个代理人,旨在通过优化道路网络中的交通流共同实现优化。此外,我们还将超图学习引入MA-SAC的学习者网络中,以促进道路网络中多个交叉口的空间-时间互动。该方法结合了超图和空间-时间图结构来编码交通数据,并捕捉多个交叉口之间的复杂空间-时间关系。我们的实证评估,在多种数据集上进行测试,证明了我们框架在最小化平均车辆行驶时间和保持高吞吐量性能方面的优越性。本工作有助于推动更加智能的城市交通管理解决方案的发展。我们将在 https://github.com/Edun-Eyes/TSC 上发布代码以支持本工作的可再现性。