摘要
我们提出了一种名为LightLLM的模型,该模型对预训练的大型语言模型 (LLM) 进行微调,用于基于光线的传感任务。它集成了传感器数据编码器以提取关键特征,上下文提示以提供环境信息,以及融合层以将这些输入组合成统一的表示。然后,预训练的LLM处理此组合输入,在微调过程中,通过添加轻量级的可训练组件来进行微调,同时保持其原始参数不变,从而使模型能够适应新的任务而无需更改其原始参数。这种方法能够以最小的计算开销和再训练工作量,灵活地将LLM应用于专门的光传感任务。我们已经为三个光传感任务实现了LightLLM:基于光线的定位、室外太阳能预测和室内太阳能估算。使用真实世界的实验数据集,我们证明LightLLM显著优于最先进的方法,在以前未见的环境中测试时,定位精度提高了4.4倍,室内太阳能估算精度提高了3.4倍。我们进一步证明,LightLLM优于直接提示的ChatGPT-4,突出了LightLLM专门用于传感器数据与文本提示融合的架构的优势。