arXiv:2401.14295v4 宣告类型: 替换-交叉 摘要：自然语言处理（NLP）领域在过去几年中取得了显著进展，特别是在通过创新的提示技术提高大型语言模型（LLM）性能方面。在这之中，结合结构的提示工程已成为一种有前途的范式，设计如Chain-of-Thought、Tree of Thoughts或Graph of Thoughts等，整体LLM推理由一个结构如图指导。通过大量示例的说明，这种范式显著增强了LLM解决各种任务的能力，从逻辑或数学推理到规划或创造性写作。为了促进对该领域增长的理解并为未来的发展铺平道路，我们提出了一种有效的和高效的LLM推理方案的一般蓝图。为此，我们对提示执行管道进行了深入分析，澄清并明确定义了不同的概念。随后，我们构建了第一个结构增强型LLM推理方案的分类体系。我们着重于识别被利用的基本结构类别，并分析了这些结构的表示、使用这些结构执行的算法，以及其他许多方面。我们将这些结构称为推理拓扑，因为它们的表现部分具有空间性特征，这些结构都处于LLM上下文中。我们使用提出的分类体系比较了现有的提示方案，讨论了某些设计选择如何导致性能和成本的不同模式。我们还概述了理论基础，提示与LLM生态系统中的其他部分如知识库之间的关系，以及相关的研究挑战。我们的工作将有助于推进未来的提示工程技术。