arXiv:2410.15281v3 宣告类型: replace-cross 摘要：随着大型语言模型（LLMs）的更广泛使用和其高度成功的开发，人们对将LLMs应用于自动驾驶技术的兴趣和需求不断增加。受到它们自然语言理解和推理能力的驱动，LLMs有可能增强自动驾驶系统中的各个方面，从感知和场景理解到语言交互和决策。在这篇论文中，我们首先介绍了为自动驾驶设计LLMs（LLM4AD）的新概念。然后，我们提出了一个全面的基准来评估LLM4AD在模拟环境中的指令遵循能力。此外，我们在实际车辆平台上进行了一系列实验，全面评估了我们的LLM4AD系统的表现和潜力。最后，我们展望了LLM4AD的主要挑战，包括延迟、部署、安全和隐私、安全性、信任和透明度以及个性化。我们的研究突显了LLMs在增强自动驾驶车辆技术各个方面的巨大潜力，从感知和场景理解到语言交互和决策。