摘要
arXiv:2502.04358v1 分类:交叉学科
摘要:将复杂问题分解为子问题通常可以使问题更容易且更高效地解决。随着大型语言模型(LLMs)在越来越多的能力上达到了关键的可靠性阈值,人们正在不断增加努力将系统分解为基于LLM的代理组,每个代理都可以被分配子任务。然而,这种分解(即使自动化也是如此)通常是直观的,比如基于人类如何为团队成员分配角色。这些角色分解与最优角色之间有多接近?本文立场主张,采用LLM原语进行渐近分析是理解和讨论此类分解系统效率所需的方法,而这些分析将有助于扩大这些系统的机会。通过将LLM前向传递视为计算成本的基本单位,可以将特定LLM的(通常不透明)内部工作机制与一组LLM如何协调解决复杂问题的固有效率区分开来。换句话说,如果我们想将LLM的部署扩展到极限,而不是赋予LLM人类的特性,那么采用LLM原语进行渐进分析是理解和开发更强大的大型问题分解为LLM代理的方法。