摘要
arXiv:2504.05694v2
公告类型: replace-cross
摘要: 大型语言模型(LLMs)因其实现出色的世界知识能力而在推荐系统中引起了广泛关注。然而,现有的依赖欧几里得空间的方法在捕捉文本和语义数据中固有的丰富层次信息方面存在困难,而这种层次信息对于捕捉用户偏好是至关重要的。双曲空间的几何特性为解决这一问题提供了有希望的解决方案。不过,将基于LLMs的方法与双曲空间结合以有效地提取和融合各种层次信息并不简单。为了解决这个问题,我们提出了一种模型无关的框架,命名为HyperLLM,该框架从结构和语义两个视角提取和整合层次信息。从结构上看,HyperLLM 使用大型语言模型生成具有层次化父子关系的多级分类标签,以供每个项目使用。然后,通过对比学习,共同学习和对齐标签项和用户项的交互,从而为模型提供清晰的层次信息。从语义上看,HyperLLM 引入了一种新颖的元优化策略,从语义嵌入中提取层次信息,并弥合语义空间和协作空间之间的差距,实现无缝集成。广泛的实验表明,HyperLLM 在双曲空间和LLMs基础上的推荐系统中显著表现出色,性能提升了超过40%。此外,HyperLLM 不仅提高了推荐系统的性能,还增强了训练稳定性,突显了层次信息在推荐系统中的关键作用。