LLM2D
多样化的提示:通过MAP-Elites照亮大规模语言模型的提示空间
Diverse Prompts: Illuminating the Prompt Space of Large Language Models with MAP-Elites
作者: Gabriel Machado Santos, Rita Maria da Silva Julia, Marcelo Zanchetta do Nascimento
发布日期: 4/22/2025
arXiv ID: oai:arXiv.org:2504.14367v1

摘要

arXiv:2504.14367v1 宣告类型: cross 摘要: 提示工程对于优化大型语言模型(LLMs)至关重要,但提示结构与任务性能之间的联系尚未得到充分探索。本文介绍了一种结合上下文无关文法(CFG)和MAP-Elites算法的进化方法,以系统地探索提示空间。我们的方法优先考虑质量和多样性,生成高性能且结构多样的提示,并通过变化诸如示例数量(shot)和推理深度等因素来分析它们与多种任务的契合度。通过系统地映射表型空间,我们揭示了结构变化如何影响LLM性能,为任务特定和适应性强的提示设计提供了可行的见解。在多个LLM上对七个BigBench Lite任务进行评估,我们的结果强调了质量和多样性的关键交互作用,提高了LLM的有效性和多功能性。