arXiv:2502.11560v1 宣告类型: 新 摘要：基础模型的兴起将重点从资源密集型微调转移到了提示工程，这是一种通过输入设计而不是权重更新来引导模型行为的范式。尽管手工提示工程在可扩展性、适应性和跨模态对齐方面存在局限性，但基于基础模型（FM）的优化、进化方法、梯度优化以及强化学习等多种自动化方法提供了有前景的解决方案。然而，现有的综述仍然在模态和方法论之间保持着碎片化状态。本文通过统一的优化理论视角，首次提出了自动化提示工程的全面综述。我们正式将提示优化定义为在离散、连续和混合提示空间上的最大化问题，并系统地按优化变量（指令、软提示、示例）、任务特定目标和计算框架对方法进行组织。通过将理论表述与文本、视觉和多模态领域的实际实现连接起来，这篇综述为研究人员和从业人员建立了一个基础框架，同时指出了受限优化和以代理为中心的提示设计中的未探索前沿领域。