摘要
近年来,多模态情感分析(MSA)领域出现了一种新方向,旨在解决数据不完整问题。鉴于语言模态通常包含丰富的情感信息,我们将其视为主导模态,并提出了一种创新的语言主导抗噪学习网络(LNLN)来实现鲁棒的 MSA。提出的 LNLN 包含一个主导模态校正(DMC)模块和一个基于主导模态的多模态学习(DMML)模块,通过确保主导模态表示的质量,增强了模型在各种噪声场景下的鲁棒性。除了方法设计之外,我们还在随机数据缺失场景下进行了全面实验,在几个流行的数据集(例如,MOSI、MOSEI 和 SIMS)上使用多样化且有意义的设置,与文献中现有的评估相比,提供了额外的统一性、透明度和公平性。从经验上看,LNLN 始终优于现有的基线,在这些具有挑战性和广泛的评估指标中展现出优越的性能。