摘要
人工智能 (AI) 在自动驾驶 (AD) 研究中扮演着关键角色,推动其向智能化和高效化发展。目前,AD 技术的发展主要遵循两条技术路径:模块化和端到端。模块化将驾驶任务分解为感知、预测、规划和控制等模块,并分别进行训练。由于模块之间训练目标的不一致,集成效果容易产生偏差。端到端方法试图通过利用一个单一模型直接从传感器数据映射到控制信号来解决这个问题。但这种路径在综合特征学习能力方面有限,难以应对不可预测的长尾事件和复杂的城市交通场景。面对两条路径中的挑战,许多研究人员认为,具有强大推理能力和广泛知识理解的大型语言模型 (LLMs) 可能是解决方案,期望 LLMs 能为 AD 系统提供更深层次的理解和决策能力。为了解 LLMs 是否能够增强 AD,本论文对 LLMs 在 AD 系统中的潜在应用进行了深入分析,包括探索其在模块化和端到端方法中的优化策略,特别关注 LLMs 如何解决当前解决方案中存在的问题和挑战。此外,我们探讨了一个重要问题:基于 LLM 的人工通用智能 (AGI) 能否成为实现高水平 AD 的关键?我们进一步分析了 LLMs 在推动 AD 技术发展中可能遇到的潜在限制和挑战。