LLM2D
先思考后推荐:释放顺序推荐中的潜在推理能力
Think Before Recommend: Unleashing the Latent Reasoning Power for Sequential Recommendation
作者: Jiakai Tang, Sunhao Dai, Teng Shi, Jun Xu, Xu Chen, Wen Chen, Wu Jian, Yuning Jiang
发布日期: 3/31/2025
arXiv ID: oai:arXiv.org:2503.22675v1

摘要

arXiv:2503.22675v1 宣告类型: cross 摘要: 序列推荐 (SeqRec) 旨在通过捕获用户历史交互中的序列模式来预测下一个项目,在许多实际推荐系统中扮演着至关重要的角色。然而,现有的方法主要采用直接前向计算范式,其中序列编码器的最终隐藏状态作为用户表示。我们认为,由于这种推理范式限制了计算深度,难以建模用户偏好复杂演变的性质,并缺乏对长尾项的细致理解,导致性能不佳。为了解决这一问题,我们提出 \textbf{ReaRec},这是推荐系统中首个推理时计算框架,通过隐式多步推理增强用户表示。具体而言,ReaRec 自回归地将序列的最后一个隐藏状态输入到序列推荐器中,并结合特殊的推理位置嵌入来从原始项目编码空间解耦多步推理空间。此外,我们引入了两种轻量级基于推理的学习方法,即集成推理学习 (ERL) 和逐步推理学习 (PRL),以进一步有效利用 ReaRec 的推理潜力。在五个公开的实际数据集和不同 SeqRec 架构上的广泛实验中,证明了我们提出的 ReaRec 的通用性和有效性。令人惊讶的是,事后分析显示,ReaRec 显著提高了多个序列推荐主干的性能天花板,提升幅度约为 30\%-50\%。因此,我们认为这项工作可以为未来推荐系统推理时计算的研究打开一条新的有前景的道路。