arXiv:2412.09078v4 通告类型: 替换-交叉 摘要：大型语言模型（LLMs）在各种语言任务中展示了卓越的能力，但在解决复杂推理问题方面仍面临重大挑战。虽然现有的方法，如思维链（CoT）和思维树（ToT），通过分解问题或结构化提示来增强推理能力，但它们通常仅进行一次推理过程，可能会错过复查错误路径的机会，从而影响准确性。为了解决这一局限性，我们提出了一种新的推理框架，称为思维森林（FoT），它结合了多个推理树，利用集体决策解决复杂逻辑问题。FoT 使用稀疏激活策略来选择最相关的推理路径，从而提高效率和准确性。此外，我们引入了一种动态自我修正策略，能够进行实时错误修正，同时引入共识引导决策策略，以优化正确性和计算资源。实验结果表明，结合这些策略的 FoT 框架显著增强了 LLMs 的推理能力，使其能够更加精确和高效地解决复杂任务。代码将在 https://github.com/iamhankai/Forest-of-Thought 提供。