如今，车辆已能够在高速公路上自动驾驶，无人驾驶出租车也在主要城市运营，未来预计将出现更高级别的自动驾驶技术，并变得更加普遍。然而，从技术上讲，“五级”（L5）自动驾驶，即完全自主驾驶，尚未实现。要实现这一点，必须具备诸如全自动高速公路匝道入口等功能，并提供可证明的安全可靠的运行，以实现完全自主。我们对一种控制车辆前进动作以最大限度地减少合并（自身）车辆驶入高速公路交通流时与之发生碰撞的高速公路匝道功能进行了系统研究。我们采用博弈论多智能体 (MA) 方法来解决这个问题，并研究基于深度强化学习 (DRL) 的控制器的使用。MA DRL 的虚拟环境使用自博弈和模拟数据，其中合并车辆安全地学习在锥形合并过程中控制纵向位置。本文提出的工作扩展了现有工作，研究了两个以上车辆（智能体）的交互作用，并通过系统地扩展道路场景以包含更多交通车辆和自身车辆来实现。虽然之前关于两车场景的研究表明，在完全分散的、非协调的环境中，无碰撞控制器在理论上是不可能的，但我们通过实验证明，使用我们的方法学习的控制器在与理想的最佳控制器相比时几乎是理想的。