arXiv:2410.10762v4 宣告类型: 替换 摘要: 大型语言模型（LLMs）在解决多样化领域中的复杂任务方面展示了巨大的潜力，通常通过遵循详细指令和操作序列的自主工作流程来实现。然而，构建这些工作流程需要大量的手动努力，限制了其可扩展性和一般性。最近的研究试图自动化这些工作流程的生成和优化，但现有的方法仍然依赖于初始的手动设置，并未能完全实现自动化和有效的工作流程生成。为了应对这一挑战，我们将工作流程优化重新表述为一个基于代码表示的工作流程搜索问题，其中调用LLM的节点通过边连接。我们引入了AFlow，这是一种自动化框架，利用蒙特卡洛树搜索高效地探索这个空间，并通过代码修改、树状结构的经验以及执行反馈逐步改进工作流程。跨六个基准数据集的实证评估展示了AFlow的有效性，平均提高了最先进的基线5.7%的性能。此外，AFlow使得较小的模型在成本仅为GPT-4o的4.55%的情况下，在特定任务上能够超越GPT-4o的推理成本。代码可在 https://github.com/FoundationAgents/AFlow 获取。