LLM2D
面向常识问答中深度对齐的知识图谱解释
Towards Faithful Knowledge Graph Explanation Through Deep Alignment in Commonsense Question Answering
发布日期: 9/23/2024
arXiv ID: oai:arXiv.org:2310.04910v5

摘要

arXiv:2310.04910v5 公告类型: 替换-交叉 摘要: 语言模型 (LMs) 与知识图谱 (KGs) 的融合在常识问答中被广泛应用,但生成可信的解释仍然具有挑战性。当前的方法往往忽视路径解码的忠实性,导致图编码器输出与模型预测之间的偏差。我们识别出混淆效应和LM-KG对齐问题作为导致虚假解释的关键因素。为解决这一问题,我们引入了LM-KG忠实度指标来评估KG表示的可靠性,并提出了LM-KG分布感知对齐 (\textit{LKDA}) 算法以提高解释的忠实性。在没有真实标签的情况下,我们使用提出的忠实度-稀疏性权衡曲线来评估KG解释。在CommonsenseQA和OpenBookQA上的实验表明,LKDA显著提升了解释的忠实性和模型性能,突显了解决分布对齐问题对于可靠的常识推理的重要性。