摘要
arXiv:2504.18722v1 建议类型: cross
摘要:大型语言模型(LLMs)的 recent 进展已经在多个应用场景中引起了它们的流行。然而,prompt 工程,用于优化利用这些模型的过程,仍然基于近似和主观方法。目前关于 prompt 工程的研究大多集中在任务特定的优化上,而忽视了在 prompt 开发过程中考虑所关注的 LLM 的行为。本文介绍了 MODP —— 多目标导向 prompt(Multi Objective Directional Prompting),这是一个基于两个关键概念的框架:1)多目标性:考虑 LLM 内在行为作为 prompt 开发中额外目标的重要性,2)导向 prompt:一种基于度量的方法,用于 prompt 工程,以确保开发出稳健和高精度的 prompt。我们使用合成创建的数据集在总结任务上证明了我们提出的想法的有效性,相对于初始 prompt 实现了 26% 的性能提升。最后,我们将 MODP 应用于开发 Dell 下一步最佳行动支持工具的 prompt,该工具现在处于生产状态,并被全球超过 10,000 名内部支持人员使用,服务于数百万客户。