LLM2D
迷失在序列中:大型语言模型理解序列推荐吗?
Lost in Sequence: Do Large Language Models Understand Sequential Recommendation?
作者: Sein Kim, Hongseok Kang, Kibum Kim, Jiwan Kim, Donghyun Kim, Minchul Yang, Kwangjin Oh, Julian McAuley, Chanyoung Park
发布日期: 2/20/2025
arXiv ID: oai:arXiv.org:2502.13909v1

摘要

arXiv:2502.13909v1 类型: cross 摘要: 大型语言模型 (LLMs) 由于其高级文本理解能力和上下文意识,最近成为了推荐系统的有前景的工具。尽管目前对基于LLM的推荐 (LLM4Rec) 模型的训练和评估主要是在顺序推荐场景下进行的,但我们发现,现有模型是否能够充分捕捉用户项目交互序列中固有的顺序信息已经被很大程度上忽视了。在本文中,我们首先通过一系列实验展示,现有的 LLM4Rec 模型在训练和推理过程中并不能充分捕捉序列信息。然后,我们提出了一种简单而有效的基于LLM的顺序推荐器,称为 LLM-SRec,这是一种通过从预先训练的 CF-SRec 模型中提取的用户表示对LLM进行蒸馏以增强其对序列信息整合的方法。我们的大量实验表明,LLM-SRec 提高了LLM理解用户项目交互序列的能力,最终提高了推荐性能。此外,与现有的 LLM4Rec 模型需要对LLM进行微调不同,LLM-SRec 仅通过训练少量轻量级的MLP就能达到最先进的性能,突显了其在实际应用中的实用性。我们的代码可在 https://github.com/Sein-Kim/LLM-SRec 获取。