LLM2D
人工智能能否生成反映患者关切的高质量研究课题?
Can Artificial Intelligence Generate Quality Research Topics Reflecting Patient Concerns?
作者: Jiyeong Kim, Michael L. Chen, Shawheen J. Rezaei, Mariana Ramirez-Posada, Jennifer L. Caswell-Jin, Allison W. Kurian, Fauzia Riaz, Kavita Y. Sarin, Jean Y. Tang, Steven M. Asch, Eleni Linos
发布日期: 11/25/2024
arXiv ID: oai:arXiv.org:2411.14456v1

摘要

以患者为中心的疾病研究日益重要,它能够缩小研究与患者护理之间的差距,然而将患者的观点纳入健康研究一直不够一致。我们提出了一种自动化框架,该框架利用创新的自然语言处理 (NLP) 和人工智能 (AI) 技术结合患者门户信息,生成优先考虑重要患者问题的研究课题。我们进一步量化了 AI 生成的研究课题的质量。为了确定患者的临床关注点,我们分析了来自一家大型学术医院(2013 年至 2024 年)的 25549 名乳腺癌或皮肤癌患者的 614464 条患者信息,构建了一个两阶段的无监督 NLP 主题模型。然后,我们使用广泛使用的 AI(ChatGPT-4o,OpenAI Inc,2024 年 4 月版本)和提示工程策略,生成解决已定义问题的研究课题。我们指导 AI 执行多级任务:1)知识解释和总结(例如,解释和总结 NLP 定义的主题);2)知识生成(例如,生成与患者问题相对应的研究想法);3)自我反思和修正(例如,在搜索科学文章后确保和修改研究想法);4)自我肯定(例如,确认和最终确定研究想法)。六位经验丰富的乳腺肿瘤学家和皮肤科医生使用 5 分李克特量表(1 分为优秀,5 分为差)评估了 AI 生成的研究课题的重要性及新颖性。当两个分数都低于平均分时,三分之一的 AI 建议的研究课题具有高度重要性和新颖性。在两种癌症中,三分之二的 AI 建议的课题都是新颖的。我们的研究结果表明,通过大量患者信息反映患者观点的 AI 生成的研究课题,可以有效地指导未来以患者为中心的健康研究方向。