摘要
大型语言模型(LLMs)已在各个领域改变了人工智能,其中提示在引导模型输出方面至关重要。然而,手动提示工程既费时又特定于领域,因此需要自动化的解决方案。我们介绍了 PromptWizard,这是一个新颖的、完全自动化的离散提示优化框架,它利用了一种自进化、自适应机制。通过反馈驱动的批评和综合过程,PromptWizard 在探索和利用之间取得了有效的平衡,迭代地完善提示指令和上下文示例,以生成人类可读的、特定于任务的提示。这种引导方法系统地提高了提示质量,从而在 45 个任务中取得了优越的性能。即使在训练数据有限、LLM 规模较小以及各种 LLM 架构的情况下,PromptWizard 也表现出色。此外,我们的成本分析表明,API 调用、令牌使用和总体成本大幅减少,这证明了 PromptWizard 的效率、可扩展性和相对于现有提示优化策略的优势。