arXiv:2412.09078v2 通知类型: 替换-交叉 摘要: 大型语言模型（LLMs）在各种语言任务中表现出色，但在解决复杂的推理问题方面仍面临重大挑战。虽然现有的方法，如思维链（CoT）和思维树（ToT），通过分解问题或排列提示来增强推理能力，但它们通常只进行一次推理过程，并且可能会遗漏重新审视错误路径的机会，从而损害准确性。为了解决这一局限性，我们提出了一种名为思维森林（FoT）的新型推理框架，该框架整合了多个推理树以利用集体决策来解决复杂的逻辑问题。FoT采用稀疏激活策略来选择最相关的推理路径，从而提高效率和准确性。此外，我们引入了一种动态自校正策略，以实现实时错误纠正，并结合共识引导的决策策略，以优化正确性和计算资源。实验结果表明，结合这些策略的FoT框架显著增强了LLMs的推理能力，使其能够以更高的精确性和效率解决复杂的任务。