摘要
点击率预测在推荐系统中扮演着至关重要的角色。最近,大型语言模型 (LLM) 由于其涌现能力已应用于推荐系统。虽然利用 LLMs 的语义信息已显示出推荐系统性能的一些改进,但这些研究中仍然存在两个显著的局限性。首先,增强型 LLM 推荐系统在从文本环境中提取终身用户行为序列中的有价值信息以用于推荐任务方面面临挑战。其次,人类行为的内在变异性导致持续不断的新的行为和不规则波动的用户兴趣。这一特性给现有模型带来了两个重大挑战。一方面,它给 LLMs 在有效捕捉这些序列中用户兴趣的动态变化方面带来了困难;另一方面,如果 LLMs 需要在每次更新用户序列时反复调用,则存在巨大的计算开销问题。在这项工作中,我们提出了一种基于大型语言模型的终身用户行为建模 (LIBER) 方法,该方法包括三个模块:(1) 用户行为流分区 (UBSP),(2) 用户兴趣学习 (UIL) 和 (3) 用户兴趣融合 (UIF)。首先,采用 UBSP 以增量方式将冗长的用户行为序列压缩成较短的分区,从而促进更有效的处理。随后,UIL 以级联方式利用 LLMs 从这些分区中推断信息。最后,UIF 集成上述过程中生成的文本输出,以构建一个综合的表示,该表示可以被任何推荐模型用来提高性能。LIBER 已部署在华为的音乐推荐服务中,并在用户的播放次数和播放时间上分别实现了 3.01% 和 7.69% 的显著改进。