LLM2D
弥合差距:利用对齐促进缺失模态脑肿瘤分割
Mind the Gap: Promoting Missing Modality Brain Tumor Segmentation with Alignment
作者: Tianyi Liu, Zhaorui Tan, Haochuan Jiang, Xi Yang, Kaizhu Huang
发布日期: 10/1/2024
arXiv ID: oai:arXiv.org:2409.19366v1

摘要

脑肿瘤分割通常基于多种磁共振成像(MRI)。然而,在临床实践中,某些 MRI 模态可能缺失,这会导致更困难的情况。为了应对这一挑战,知识蒸馏已成为一种很有前景的策略。然而,最近的努力通常忽略了模态差距,因此无法学习跨不同模态的不变特征表示。这种缺点导致教师和学生的表现有限。为了改善这些问题,本文提出了一种新范式,该范式将相关模态的潜在特征对齐到一个定义明确的分布锚点。作为一项重大贡献,我们证明了我们新颖的训练范式确保了紧密的证据下界,从而从理论上证明了其有效性。在不同主干上的大量实验验证了所提出的范式可以实现不变特征表示,并产生模态差距缩小的教师。这进一步为缺失模态学生提供了更好的指导,在骰子得分上平均提高了 1.75。