摘要
arXiv:2504.16352v1 类别:交叉学科
摘要:多模态推荐系统(MRSs)通过利用图像、文本和音频等多种模态,在提高个性化方面取得了显著成功。然而,仍然存在两个关键挑战未得到充分解决:(1)对缺乏模态场景考虑不足以及(2)忽视了模态特征的独特性。这些挑战导致在实际场景中缺乏模态时,推荐性能显著下降。为了解决这些问题,我们提出了Disentangling and Generating Modality Recommender(DGMRec)这一全新的框架,专门针对缺乏模态场景。DGMRec从基于信息的角度将模态特征分解为通用模态特征和特定模态特征,从而使推荐具有更加丰富的表示。在此基础上,它通过整合其他模态的对齐特征并利用用户的模态偏好来生成缺失的模态特征。广泛的实验结果显示,在包括缺失模态和新项目设置以及多样化的缺失比率和不同级别的缺失模态在内的各种挑战场景中,DGMRec始终优于最新的MRSs。此外,DGMRec基于生成的方法能够实现跨模态检索,这是现有的MRSs无法完成的任务,突显了其适应性和在实际应用中的潜力。我们的代码可在https://github.com/ptkjw1997/DGMRec 获取。