LLM2D
提高大型语言模型的可靠性:结合 Cot、RAG、自我一致性与自我验证
Improving the Reliability of LLMs: Combining CoT, RAG, Self-Consistency, and Self-Verification
作者: Adarsh Kumar, Hwiyoon Kim, Jawahar Sai Nathani, Neil Roy
发布日期: 5/15/2025
arXiv ID: oai:arXiv.org:2505.09031v1

摘要

arXiv:2505.09031v1 宣告类型: 新颖 摘要: 幻觉,即大型语言模型(LLMs)生成自信心强但不正确的或不相关的信息,仍然是它们在处理复杂、开放性任务时的关键限制。链式思考(CoT)提示作为一种通过引导模型完成中间步骤来改善多步推理的方法而崭露头角。然而,CoT本身并不能完全解决幻觉问题。在本文中,我们探讨了如何将CoT与检索增强生成(RAG)结合,并应用自一致性与自我验证策略,以减少幻觉并提高事实准确性。通过在推理过程中引入外部知识源,并使模型能够验证或修订自己的输出,我们旨在生成更准确和连贯的回应。我们进行了一项基线LLM与CoT、CoT+RAG、自一致性、自我验证技术的比较评估。我们的结果突显了每种方法的有效性,并指出了最稳健的方法,用于最小化幻觉同时保持流畅性和推理深度。