arXiv:2504.11514v1 宣称类型: 新颖 摘要：通过监督学习训练的神经网络（NNs）在应对真实驾驶场景中常见的边界案例时存在困难，因为无法获得涵盖所有边界案例的详尽数据集，因此知识驱动的方法（类似于人类如何直观地检测意外驾驶行为）是数据驱动方法的有效补充。本文提出了一种结合低级模型预测控制器（MPC）和本地部署的大型语言模型（LLMs）的混合架构，以增强决策和人机交互（HMI）。决策LLM模块评估机器人状态信息与自然语言指令的一致性，以确保遵循期望的驾驶行为。然后，MPCxLLM模块根据LLM生成的见解调整MPC参数，从而实现控制灵活性同时保留传统MPC系统的安全性和约束保证。此外，为了实现高效的车载部署并消除对云连接的依赖，我们将处理转移到车载计算平台：我们提出了利用检索增强生成（RAG）、低秩适应（LoRA）微调和量化的方法。实验结果表明，这些增强措施在推理准确性方面提高了最多10.45%，在控制灵活性方面提高了最多52.2%，在计算效率方面提高了多达10.5倍（每秒词元），验证了所提出框架在小型化机器人平台上进行实时部署的实用性。该工作将高层次决策与低层次控制适应性相结合，提供了一种知识驱动和自适应的自主驾驶系统（ADS）的协同框架。