随着大型语言模型（LLM）日益集成到车辆导航系统中，了解其路径规划能力至关重要。我们通过六个在不同环境和难度下的真实世界路径规划场景测试了三个LLM。我们的实验表明，所有LLM在所有场景中都犯了大量错误，表明它们是不可靠的路径规划器。我们建议未来的工作重点在于实施现实性检查机制、增强模型透明度以及开发更小的模型。