LLM2D
好奇的LLM:通过LLM增强的知识图谱推理提升多文档问答
CuriousLLM: Elevating Multi-Document Question Answering with LLM-Enhanced Knowledge Graph Reasoning
作者: Zukang Yang, Zixuan Zhu, Xuan Zhu
发布日期: 2/18/2025
arXiv ID: oai:arXiv.org:2404.09077v2

摘要

arXiv:2404.09077v2 Announce Type: replace-cross 摘要:大型语言模型(LLMs)已经在开放域的问题回答中取得了显著的成功。然而,它们仍然面临着幻觉和知识截止等问题的挑战。这些问题可以通过上下文学习得到缓解,即在生成答案之前为LLMs提供相关的上下文。最近的文献提出了一种知识图谱提示(KGP)的方法,将知识图谱与基于LLM的遍历代理结合,显著提高了文档检索的质量。然而,KGP需要大量数据集的成本高昂的微调,并仍然容易产生幻觉。在本文中,我们提出了CuriousLLM,一种将好奇心驱动的推理机制集成到LLM代理中的增强方法。这一机制使代理能够生成相关后续问题,从而更高效地指导信息检索过程。我们方法的核心是开发了新的Follow-upQA数据集,该数据集包括问题及其支持证据作为输入,后续问题作为 ground truth。这些后续问题要么询问还缺少什么才能完全回答用户的查询,要么使用特殊标记来表示检索到的证据已经足够。我们的实验表明,CuriousLLM在多文档问题回答(MD-QA)中显著提升了LLM的表现,规避了原始KGP框架的巨大计算成本和延迟。