LLM2D
TeLL-Drive:基于教师大语言模型引导的深度强化学习增强自动驾驶
TeLL-Drive: Enhancing Autonomous Driving with Teacher LLM-Guided Deep Reinforcement Learning
作者: Chengkai Xu, Jiaqi Liu, Peng Hang, Jian Sun
发布日期: 2/11/2025
arXiv ID: oai:arXiv.org:2502.01387v2

摘要

arXiv:2502.01387v2 宣告类型: 替换 摘要:尽管深度强化学习(DRL)和大型语言模型(LLMs)各自在解决自主驾驶中的决策挑战方面展现出潜力,但DRL经常遭受高样本复杂性的困扰,而LLMs则难以确保实时决策。为了解决这些限制,我们提出了TeLL-Drive,这是一种混合框架,将教师LLM与基于注意力的学生DRL策略集成。通过对上下文丰富的提示中包含风险指标、历史场景检索和领域启发式信息,LLM通过逐步推理生成高层次的驾驶策略。随后,一种自我注意力机制将这些策略与DRL代理的探索融合,加速策略的收敛并提升在各种驾驶条件下的一致性。我们在多个交通场景下的实验结果显示,TeLL-Drive在成功率、平均回报和实时可行性方面优于现有的基线方法,包括其他基于LLM的方法。消融研究强调了每个模型组件的重要性,尤其是注意力机制与LLM驱动指导之间的协同作用。这些发现表明,TeLL-Drive显著增强了自主驾驶系统的适应性和安全性,并提供了一种更高效和可扩展的策略学习方法。完整的验证结果可在我们的网站上查看。