LLM2D
普罗米修斯:一个以人为本的流水线,用于简化基于大型语言模型的系统评价
PROMPTHEUS: A Human-Centered Pipeline to Streamline SLRs with LLMs
作者: Jo\~ao Pedro Fernandes Torres, Catherine Mulligan, Joaquim Jorge, Catarina Moreira
发布日期: 10/23/2024
arXiv ID: oai:arXiv.org:2410.15978v2

摘要

学术出版物的数量不断增长,给研究人员进行及时且准确的系统文献综述带来了巨大挑战,尤其是在人工智能等快速发展的领域。这种学术文献的增长也使得普通人越来越难以有效地获取科学知识,这意味着学术文献在大众媒体以及更广泛的社会中常常被误读。传统的文献综述方法费时费力且容易出错,难以跟上新研究的快速步伐。为了解决这些问题,我们开发了PROMPTHEUS:一个基于人工智能的流水线解决方案,它利用大型语言模型自动化文献综述过程。我们的目标是通过减少人工工作量来提高效率,同时保持全面文献综述所需的精确性和连贯性。PROMPTHEUS 自动化了文献综述过程的关键阶段,包括系统搜索、数据提取、使用BERTopic进行主题建模以及使用Transformer模型进行摘要。在五个研究领域的评估表明,PROMPTHEUS 减少了综述时间,实现了高精度,并提供了连贯的主题组织,为在日益拥挤的研究环境中进行文献综述提供了一个可扩展且有效的解决方案。此外,此类工具还可以通过使摘要更容易被外行人理解来减少对科学日益增长的不信任。