arXiv:2407.05441v3 宣告类型: replace-cross 摘要：近期的研究实证表明，语言模型（LMs）不仅编码语义信息，还蕴含了丰富的世界知识，吸引了各领域的广泛关注。然而，在推荐领域，尚不确定LMs是否隐式地编码了用户偏好信息。与普遍认为由于语言建模和行为建模目标的巨大差异导致LMs和传统推荐器学习两个截然不同的表征空间的观点不同，本项工作重新审视了这一观点，并探索直接从语言表征空间中提取推荐表征空间的可能性。令人惊讶的是，我们的发现表明，当高级LM表征线性映射到项目表征时，可以取得卓越的推荐性能。这一结果暗示，高级语言表征空间与一个有效的项目表征空间之间可能存在同态性，这表明协同信号可能被LMs隐式地编码。受这些发现的启发，我们探讨了仅基于语言表征设计高级协同过滤（CF）模型的可能性，而不依赖于ID嵌入。具体来说，我们整合了几种关键组件，以构建一个简单而有效的模型，输入项标题。实验结果表明，这种简单模型可以超越现有的领先ID基于的CF模型，这为利用语言表征进行更好推荐提供了思路。此外，我们系统地分析了这种简单模型，并找到了几种关键特征，这些特征有助于利用高级语言表征：良好的项目表征初始化、零样本推荐能力以及关注用户意图。我们的发现突出了语言建模与行为建模之间的联系，这可以启迪自然语言处理和推荐系统社区。