摘要
arXiv:2502.04794v2 宣告类型: replace-cross
摘要:无法解释的发热(FUO)仍然是一个诊断难题。MedMimic 是一个受到现实世界诊断过程启发的多模态框架。它使用预训练模型如 DINOv2、Vision Transformer 和 ResNet-18,将高维的18F-FDG PET/CT 影像转换为低维且语义上有意义的特征。然后,一个可学习的自注意力融合网络将这些影像特征与临床数据结合进行分类。使用2017年至2023年期间四川大学华西医院的416例FUO患者病例,多模态融合分类网络MFCN在七个任务上的宏AUROC分数范围为0.8654到0.9291,优于传统的机器学习方法和单一模态的深度学习方法。消融研究和五折交叉验证进一步验证了其有效性。通过结合预训练大型模型和深度学习的优势,MedMimic 提供了一种有前景的疾病分类解决方案。