arXiv:2501.19176v1 交叉公告类型 摘要：全视野数字乳腺摄影（FFDM）是乳腺癌筛查的主要成像技术；然而，它在密实乳腺组织或纤维囊性病变患者中的有效性有限。对比增强光谱乳腺摄影（CESM），作为一种次级成像技术，能够提高肿瘤检测的准确性。然而，由于辐射暴露较高、使用对比剂以及可及性有限，其应用受到了限制。因此，CESM通常仅用于特定病例，许多患者只能依赖FFDM进行筛查，尽管CESM的诊断性能更优。虽然活检仍然是确诊的金标准，但其是一种侵入性操作，可能会给患者带来不适。我们提出了一种基于多模态、多视角的深度学习方法，结合FFDM和CESM模态在矢状位和斜位视图下对病变进行恶性或良性分类。为应对CESM数据缺失的挑战，我们利用生成式人工智能从FFDM扫描中补全CESM图像。实验结果表明，在虚拟活检中整合CESM模态对提升其性能至关重要。当实际CESM数据缺失时，合成的CESM图像表现有效，优于单独使用FFDM，特别是在FFDM和CESM模态组合的多模态配置中。我们提出的方案有潜力改善诊断流程，为临床医生提供增强智能工具以提高诊断准确性和患者护理质量。此外，作为对研究社区的贡献，我们公开发布了在实验中使用的数据集，以促进该领域的进一步发展。