摘要
在许多自然语言处理任务中,大型语言模型 (LLM) 已取代传统方法。然而,在命名实体识别 (NER) 中,现有的基于 LLM 的方法…… (如果原文只有这一句,则翻译如上;若原文包含更多内容,则翻译如下)
将领域专家纳入提示工程能够引导大型语言模型 (LLM) 输出更有帮助、更准确、更符合不同领域多样化需求的内容。然而,如果没有足够的界面支持来进行特定任务环境下的系统性实验,迭代以获得有效的提示可能具有挑战性。在这项工作中,我们介绍了 PromptHive,这是一个用于提示创作的协作界面,旨在通过鼓励快速迭代提示变体的功能,更好地将领域知识与提示工程联系起来。我们对十位数学领域专家进行了一项评估研究,并通过两次协作提示写作会议和一项对 358 名学习者的学习成果研究来验证我们的设计。我们的结果阐明了提示迭代过程,并验证了该工具的可用性,使非人工智能专家能够创建生成内容与人工编写的材料相当的提示,同时将感知到的认知负荷减少一半,并将创作过程从几个月缩短到几个小时。