arXiv:2412.09078v5 提纲类型: replace-cross 摘要：大型语言模型（LLMs）在各种语言任务中展示了非凡的能力，但解决复杂的推理问题仍然是一个重大挑战。现有的方法，如步骤推理（CoT）和思维树（ToT），通过分解问题或构建设备提示来增强推理能力，但它们通常只进行一次推理过程，可能会忽视错误的推理路径，从而影响准确性。为了解决这一限制，我们提出了一种新的推理框架，称为思维森林（FoT），该框架结合了多个推理树，利用集体决策来解决复杂逻辑问题。FoT采用稀疏激活策略来选择最相关的推理路径，从而提高效率和准确性。此外，我们还引入了一种动态自我校正策略，能够实现实时错误更正，并通过共识引导的决策策略优化准确性和计算资源。实验结果表明，通过这些策略结合FoT框架，极大地增强了LLMs的推理能力，使其能够以更高的精度和效率解决复杂任务。代码将在https://github.com/iamhankai/Forest-of-Thought提供。