LLM2D
Hyper-RAG:使用超图驱动的检索增强生成对抗大型语言模型幻觉
Hyper-RAG: Combating LLM Hallucinations using Hypergraph-Driven Retrieval-Augmented Generation
作者: Yifan Feng, Hao Hu, Xingliang Hou, Shiquan Liu, Shihui Ying, Shaoyi Du, Han Hu, Yue Gao
发布日期: 4/15/2025
arXiv ID: oai:arXiv.org:2504.08758v1

摘要

arXiv:2504.08758v1 交叉公告类型 摘要:大型语言模型(LLMs)通过增强内容生成和决策过程,已在教育、金融和医疗等多个领域取得了变革性进展。然而,由于存在幻觉现象,即生成的内容偏离事实准确性,可能导致不良后果,其在医疗领域的整合受到谨慎对待。为了解决这一问题,我们引入了基于超图的检索增强生成方法Hyper-RAG,它可以全面捕捉领域内知识的成对和超出成对的关联,从而减轻幻觉现象。在NeurologyCrop数据集上使用六种主流LLM进行的实验表明,Hyper-RAG直接使用LLM的准确性平均提升了12.3%,并且分别比Graph RAG和Light RAG高出6.3%和6.0%。此外,Hyper-RAG在查询复杂性增加时仍能保持稳定性能,而其他现有方法则会下降。进一步在九个不同的数据集上进行验证显示,Hyper-RAG相比Light RAG在选择性评估中提高了35.5%的性能。轻量级变体Hyper-RAG-Lite的速度是Light RAG的两倍,并且性能提升了3.3%。这些结果证实Hyper-RAG在提升LLM可靠性、减少幻觉现象方面的有效性,使其成为像医学诊断这样高风险应用中一个稳健的解决方案。