LLM2D
基于知识不完备性评估知识图谱检索增强生成方法
Evaluating Knowledge Graph Based Retrieval Augmented Generation Methods under Knowledge Incompleteness
作者: Dongzhuoran Zhou, Yuqicheng Zhu, Yuan He, Jiaoyan Chen, Evgeny Kharlamov, Steffen Staab
发布日期: 4/8/2025
arXiv ID: oai:arXiv.org:2504.05163v1

摘要

arXiv:2504.05163v1 提取类型: 新增 摘要: 基于知识图谱的检索增强生成(KG-RAG)是一种通过从知识图谱(KGs)中检索相关信息来增强大型语言模型(LLM)推理的技术,在回答问题(QA)等任务中的应用。然而,现实世界中的知识图谱往往是不完整的,这意味着回答问题所需的必要信息可能缺失。现有的基准测试并没有充分捕捉到知识图谱不完整性对KG-RAG性能的影响。在本文中,我们通过使用不同方法移除三元组并分析其结果,系统地评估了在不完整知识图谱下的KG-RAG方法。我们证明了KG-RAG方法对知识图谱不完整性敏感,这突显了在实际场景中需要更具鲁棒性的方法。