摘要
无监督理由提取旨在提取文本片段来支持模型预测,而无需显式理由标注。研究人员为解决此任务付出了许多努力。以往的工作通常独立编码每个方面,这可能会限制它们捕捉方面之间有意义的内部相关性的能力。虽然在减轻虚假相关性方面已经取得了重大进展,但我们的方法侧重于利用有益的内部相关性来改进多方面理由提取。在本文中,我们提出了一种多方面理由提取器 (MARE),用于同时解释和预测多个方面。具体来说,我们提出了一种基于硬删除的多方面多头注意力 (MAMHA) 机制,用于同时编码多个文本块。此外,多个特殊标记被预先附加到文本前面,每个标记对应一个特定方面。最后,部署多任务训练以减少训练开销。在两个无监督理由提取基准上的实验结果表明,MARE 实现了最先进的性能。消融研究进一步证明了我们方法的有效性。我们的代码已在 https://github.com/CSU-NLP-Group/MARE 上公开提供。