arXiv:2504.13534v1 Announce Type: cross 摘要：尽管链式思考（CoT）推理可以提高大型语言模型（LLMs）在复杂任务中的性能，但它仍然面临两个主要挑战：仅依赖LLMs生成推理链的低可靠性以及自然语言推理链对LLMs推理逻辑的干扰。为了解决这些问题，我们提出了CoT-RAG，这是一种具有三个关键设计的新型推理框架：(i) 知识图谱驱动的CoT生成，利用知识图谱调节LLMs生成推理链，从而提高推理的可靠性；(ii) 可学习的知识案例感知RAG，将检索增强生成（RAG）与知识图谱结合，以检索相关子案例和子描述，为LLMs提供可学习的信息；(iii) 虚拟程序提示执行，鼓励LLMs以更高的逻辑严谨性执行虚拟程序中的推理任务。我们在九个公共数据集上进行了全面评估，涵盖三种推理问题。与当前最先进的方法相比，CoT-RAG在准确率方面表现出显著的改进，范围从4.0%到23.0%。此外，在四个特定领域的数据集上进行测试时，CoT-RAG在准确性和高效执行方面表现出色，突显了其强大的实用性和可扩展性。