LLM2D
利用大语言模型进行AI系统中的用户故事构建:UStAI数据集
Leveraging LLMs for User Stories in AI Systems: UStAI Dataset
作者: Asma Yamani, Malak Baslyman, Moataz Ahmed
发布日期: 4/24/2025
arXiv ID: oai:arXiv.org:2504.00513v2

摘要

arXiv:2504.00513v2 宣告类型: replace-cross 摘要:AI系统在各行各业中得到了广泛应用。为AI系统创建高质量的需求是将AI系统与商业目标和消费者价值以及社会责任相一致的关键。然而,由于AI系统的不确定性以及对敏感数据的高度依赖,需要更多研究来解决AI系统需求的提取和分析问题。鉴于许多AI系统具有专有性质,缺乏开放源代码的需求文档和技术要求文件,限制了更广泛的研究所需和调查。随着大型语言模型(LLMs)成为人类生成文本的有前途的替代选择,本文探讨了利用LLMs根据学术论文摘要生成AI系统用户故事的潜在用途。我们使用了三种LLMs进行了实证评估,并从26个领域中的42篇摘要中生成了1260个用户故事。我们使用Quality User Story (QUS)框架评估其质量。此外,我们还确定了相关的需求属性(NFRs)和伦理原则。我们的分析表明,所研究的LLMs能够生成受到各种利益相关者需求启发的用户故事,为AI系统生成用户故事以及在AI系统早期需求提取阶段提供了一种有前途的方法。我们已经整理并策展了由各种LLMs生成的故事集合,并创建了一个数据集(UStAI),该数据集现在可供公众使用。