LLM2D
开源的LLM驱动联邦变压器用于预测IoV管理
Open-Source LLM-Driven Federated Transformer for Predictive IoV Management
作者: Yazan Otoum, Arghavan Asad, Ishtiaq Ahmad
发布日期: 5/14/2025
arXiv ID: oai:arXiv.org:2505.00651v2

摘要

arXiv:2505.00651v2 通知类型: 替换 摘要:物联网(IoV)生态系统中连接车辆的普及给确保可扩展、实时和可保护隐私的交通管理带来了关键挑战。现有的集中式IoV解决方案通常存在高延迟、可扩展性有限以及依赖专有人工智能(AI)模型的问题,这在动态和隐私敏感环境中尤其成为广泛应用的重大障碍。与此同时,将大型语言模型(LLMs)集成到车辆系统中仍然相对未开发,特别是在联邦情境下的提示优化和有效利用方面。为了应对这些挑战,我们提出了联邦提示优化交通变换器(FPoTT),这是一种新颖的框架,利用开源LLMs进行预测性的IoV管理。FPoTT 引入了一种动态提示优化机制,该机制能够迭代细化文本提示以增强轨迹预测。该架构采用了双重联邦学习范式,结合了轻量级边缘模型进行实时推理,以及基于云的LLMs来保留全局智能。还集成了一个基于变换器的合成数据生成器,以用NGSIM格式的各种高保真交通场景增强训练数据。广泛的评估表明,使用EleutherAI Pythia-1B的FPoTT在真实数据上的预测准确率达到99.86%,并且在合成数据集上仍保持高性能。这些结果表明开源LLMs在实现安全、适应性强和可扩展的IoV管理方面的潜力,并为智能移动生态系统提供了一个有吸引力的替代专有解决方案的选项。