LLM2D
隐私保护的联邦通用超声人工智能基础模型
Privacy-Preserving Federated Foundation Model for Generalist Ultrasound Artificial Intelligence
作者: Yuncheng Jiang, Chun-Mei Feng, Jinke Ren, Jun Wei, Zixun Zhang, Yiwen Hu, Yunbi Liu, Rui Sun, Xuemei Tang, Juan Du, Xiang Wan, Yong Xu, Bo Du, Xin Gao, Guangyu Wang, Shaohua Zhou, Shuguang Cui, Rick Siow Mong Goh, Yong Liu, Zhen Li
发布日期: 11/26/2024
arXiv ID: oai:arXiv.org:2411.16380v1

摘要

超声成像因其无创性和实时性而在临床诊断中得到广泛应用。然而,传统的超声诊断面临着诸多局限性,包括高度依赖医生的专业知识以及图像质量欠佳,这使得图像解读变得复杂,并增加了误诊的可能性。人工智能 (AI) 已成为增强临床诊断的一种很有前景的解决方案,尤其是在检测各种生物医学成像模式中的异常方面。然而,当前用于超声成像的 AI 模型面临着严峻的挑战。首先,这些模型通常需要大量的标记医学数据,这引发了对患者隐私泄露的担忧。其次,大多数现有模型都是特定任务的,这限制了其更广泛的临床实用性。为了克服这些挑战,我们提出了 UltraFedFM,这是一种创新的隐私保护超声基础模型。UltraFedFM 使用来自 9 个国家/地区 16 家分布式医疗机构的联合学习进行协同预训练,利用包含超过 100 万张超声图像的数据集,涵盖 19 个器官和 10 种超声模式。这种广泛而多样化的数据,结合安全的训练框架,使 UltraFedFM 能够展现强大的泛化能力和诊断能力。它在疾病诊断中的受试者工作特征曲线下面积平均值为 0.927,在病灶分割中的 Dice 相似系数为 0.878。值得注意的是,UltraFedFM 超越了中级超声医生的诊断准确率,并在 8 种常见全身性疾病的联合诊断中达到了专家级超声医生的性能水平。这些发现表明,UltraFedFM 可以在保障患者隐私的同时显著增强临床诊断,标志着人工智能驱动的超声成像在未来临床应用方面取得了进步。