LLM2D
面向动态设备端 LLM 个性化的自适应自监督学习策略
Adaptive Self-Supervised Learning Strategies for Dynamic On-Device LLM Personalization
作者: Rafael Mendoza, Isabella Cruz, Richard Liu, Aarav Deshmukh, David Williams, Jesscia Peng, Rohan Iyer
发布日期: 9/26/2024
arXiv ID: oai:arXiv.org:2409.16973v1

摘要

大型语言模型(LLM)彻底改变了我们与科技的互动方式,但将它们个性化以适应个人用户的偏好仍然是一个重大挑战,特别是在设备上的应用中。传统方法通常严重依赖于标记数据集,并且可能资源密集。为了解决这些问题,我们提出了自适应自监督学习策略(ASLS),它利用自监督学习技术动态地个性化LLM。该框架包括一个用于收集交互数据的用户画像层和一个用于实时模型微调的神经自适应层。这种创新方法能够从用户反馈中持续学习,使模型能够生成与用户特定上下文密切相关的响应。ASLS的自适应机制最大限度地减少了计算需求,提高了个性化效率。在各种用户场景下的实验结果表明,ASLS在提高用户参与度和满意度方面具有优越的性能,突出了其将LLM重新定义为高度响应和上下文感知的设备上系统的潜力。