LLM2D
X-跨域:跨域序列推荐的动态语言模型集成
X-Cross: Dynamic Integration of Language Models for Cross-Domain Sequential Recommendation
作者: Guy Hadad, Haggai Roitman, Yotam Eshel, Bracha Shapira, Lior Rokach
发布日期: 4/30/2025
arXiv ID: oai:arXiv.org:2504.20859v1

摘要

arXiv:2504.20859v1 交叉类型:跨域 摘要:随着新产品的不断涌现,推荐系统需要快速适应可能的新领域,而无需进行广泛的重新训练。本文提出了“X-Cross”——一种新颖的跨域序列推荐模型,通过集成多个领域特定的语言模型来进行新产品推荐;每个模型通过低秩适配器(LoRA)进行微调。给定一个推荐提示,X-Cross 按层操作,动态细化每个源语言模型的表示,通过整合所有其他模型的知识。这些细化的表示从一层传递到下一层,利用每个领域适配器的激活,确保保留领域特定的细微差别,同时跨领域实现适应性。使用亚马逊数据集进行序列推荐,X-Cross 在性能上达到了与使用 LoRA 进行微调的模型相当的结果,而只需要额外参数的25%。在跨域任务中,如从玩具领域adapt到工具、电子产品或运动,X-Cross 展示出稳健的性能,同时所需的微调数据量大约减少50%-75%即可实现有效的微调。此外,X-Cross 在替代跨域基线上的准确性上取得了显著的改进。总体而言,X-Cross 使跨域推荐具有可扩展和适应性,减少了计算开销,并为数据受限的环境提供了高效的解决方案。