LLM2D
层层剥离:神经新闻推荐器中编码器架构的深入评估
Peeling Back the Layers: An In-Depth Evaluation of Encoder Architectures in Neural News Recommenders
作者: Andreea Iana, Goran Glava\v{s}, Heiko Paulheim
发布日期: 10/3/2024
arXiv ID: oai:arXiv.org:2410.01470v1

摘要

编码器架构在神经网络新闻推荐系统中起着至关重要的作用,通过嵌入新闻和用户的语义和上下文信息。因此,研究重点一直放在增强新闻和用户编码器的表示能力,以提高推荐性能。尽管编码器架构对新闻和用户表示质量有重大影响,但现有的编码器设计分析仅关注整体下游推荐性能。这提供了一种片面的编码器相似性评估,忽略了它们行为的更细微差异,并可能导致次优模型选择。在这项工作中,我们对神经网络新闻推荐系统中的编码器架构进行了全面分析。我们系统地评估了最突出的新闻和用户编码器架构,重点关注它们的 (i) 表示相似性,使用中心核对齐度量,(ii) 生成的推荐列表的重叠,使用 Jaccard 相似度量化,以及 (iii) 整体推荐性能。我们的分析表明,某些编码技术的复杂性在经验上往往是无根据的,突出了更简单、更高效架构的潜力。通过隔离各个组件的影响,我们为研究人员和从业人员提供了宝贵的见解,让他们能够做出更明智的编码器选择决策,并避免在新闻推荐系统设计中出现不必要的复杂性。