摘要
arXiv:2502.13248v1 宣告类型: cross
摘要:自适应交通信号控制(ATSC)已成为智能交通系统中的一个热门研究话题。使用多代理深度强化学习(MADRL)技术的区域交通信号控制(RTSC)已成为ATSC的一种有前途的方法,因为它能够在可扩展性和最优化之间取得最优权衡。大多数现有的RTSC方法将交通网络划分为几个不相交的区域,然后在每个区域中应用集中式强化学习技术。然而,RTSC代理之间的合作仍然存在开放的问题,也没有对RTSC代理的通信策略进行研究。在本文中,我们提出了一种通信策略,以捕获车道间微观交通状态的相关性和路口间宏观交通状态的相关性。我们首先通过一个存储转发队列系统证明了RTSC过程的演化方程是马尔可夫的。接下来,基于演化方程,我们提出了两种GAT聚合(GA2)通信模块——GA2-Naive和GA2-Aug,以提取宏观和微观交通状态在区域内和区域间的相关性。虽然GA2-Naive只考虑了每个路口的车辆移动,GA2-Aug还考虑了车辆的变道行为。然后,提出的两种通信模块被合并到两个现有创新的RTSC框架中——RegionLight和Regional-DRL。实验结果表明,在实际和合成场景下,GA2-Naive和GA2-Aug都能够有效提高现有RTSC框架的性能。超参数测试还揭示了在大规模交通网络中,我们提出的通信模块的稳健性和潜力。