LLM2D
Re-Ex:在解释后的修订减少了LLM回复中的事实错误
Re-Ex: Revising after Explanation Reduces the Factual Errors in LLM Responses
作者: Juyeon Kim, Jeongeun Lee, Yoonho Chang, Chanyeol Choi, Junseong Kim, Jy-yong Sohn
发布日期: 4/15/2025
arXiv ID: oai:arXiv.org:2402.17097v3

摘要

arXiv:2402.17097v3 Announce Type: replace-cross 摘要:减轻幻觉问题是在现实场景中可靠部署大型语言模型(LLMs)的关键挑战。近期,提出了多种方法来检测和修正LLM生成文本中的事实错误,以减少幻觉。在本文中,我们提出了一种名为Re-Ex的方法,用于后编辑LLM生成的响应。Re-Ex引入了一种新的推理步骤,称为事实错误解释步骤。Re-Ex通过三个步骤修订了LLM的初始响应:首先,使用外部工具检索初始LLM响应中的事实错误证据;其次,LLM根据收集到的证据解释响应中的问题部分;最后,LLM使用前一步提供的解释修订初始响应。除了解释步骤外,Re-Ex还采用了新的提示技术,以减少响应修订过程所需的token计数和推理时间。在多个基准测试中,与包括FacTool、CoVE和RARR在内的现有方法相比,Re-Ex提供了更好的检测和修订性能,且推理时间和token数量更少。