摘要
arXiv:2504.05312v1 类型: cross
摘要: 通过将外部知识库中的非参数化知识集成到模型中,检索增强生成(RAG)已成为一种有前途的方法,能够提高响应准确性,同时减轻事实错误和幻觉。该方法已在问答(QA)等任务中得到广泛应用。然而,现有的RAG方法在开放域QA任务中遇到了困难,因为它们独立执行检索操作,并直接将检索到的信息纳入生成,而没有维护总结性记忆或使用适应性检索策略,导致冗余信息和信息整合不足的问题。为了解决这些问题,我们提出了适用于开放域QA任务的自适应记忆优化增强RAG(Amber),它由基于代理的记忆更新器、自适应信息收集器和多粒度内容过滤器组成,共同在一个迭代的记忆更新范式中工作。具体来说,Amber通过多代理协作方式整合和优化语言模型的记忆,确保从先前的检索步骤中全面整合知识。它能够根据积累的知识动态调整检索查询,并决定何时停止检索,从而提高检索效率和效果。此外,它通过在多级上过滤无关内容来减少噪声,保留关键信息以提高整体模型性能。我们在几个开放域QA数据集上进行了广泛的实验,结果表明我们方法及其组件的优势和有效性。源代码可在以下网址获取:\footnote{https://anonymous.4open.science/r/Amber-B203/}。