LLM2D
FiDeLiS:大型语言模型在知识图问答中的忠实推理
FiDeLiS: Faithful Reasoning in Large Language Model for Knowledge Graph Question Answering
作者: Yuan Sui, Yufei He, Nian Liu, Xiaoxin He, Kun Wang, Bryan Hooi
发布日期: 2/20/2025
arXiv ID: oai:arXiv.org:2405.13873v3

摘要

arXiv:2405.13873v3 公告类型: 替换 摘要: 大型语言模型(LLMs)在生成错误或幻觉响应方面常常面临挑战,尤其是在复杂推理任务中。利用知识图谱(KGs)作为外部知识来源,已被证明是一种可行的解决方案。然而,现有的KG增强方法,无论是检索为基础的还是代理为基础的,在大规模准确检索知识和高效遍历知识图谱方面遇到了困难。在本文中,我们提出了一种统一框架FiDeLiS,其目的是通过将答案锚定到从KG中检索的可验证推理步骤来提高LLM响应的真实性。为了实现这一点,我们利用逐步束搜索和演绎评分函数,使LLM能够验证每一推理步骤,并在问题可推断时停止搜索。此外,我们的Path-rag模块在每一束搜索步骤中预先选择较小的候选集,通过缩小搜索空间来降低计算成本。广泛的实验证明,我们的无训练和高效方法在增强真实性和可解释性方面优于强基线。