LLM2D
SynthFM:无需真实医疗数据训练跨模态基础模型进行医学图像分割
SynthFM: Training Modality-agnostic Foundation Models for Medical Image Segmentation without Real Medical Data
作者: Sourya Sengupta, Satrajit Chakrabarty, Keerthi Sravan Ravi, Gopal Avinash, Ravi Soni
发布日期: 4/14/2025
arXiv ID: oai:arXiv.org:2504.08177v1

摘要

arXiv:2504.08177v1 宣布类型: cross 摘要: 基础模型如Segment Anything Model (SAM) 在自然图像的零样本分割方面表现出色,但在医学图像分割方面遇到困难,原因在于医学图像在纹理、对比度和噪声方面存在差异。标注医学图像的成本很高,并需要特定领域的专业知识,这限制了大量标注数据的可用性。为了解决这一问题,我们提出了一种名为SynthFM的合成数据生成框架,该框架模拟了医学图像的复杂性,使基础模型能够在没有真实医学数据的情况下进行适应。我们使用SAM预训练的编码器,并从头训练SynthFM数据集上的解码器,在11种解剖结构(包括CT、MRI和超声)的9个数据集上评估了我们的方法。SynthFM在不同的提示设置和离分布数据集上超过了SAM和MedSAM等零样本基线,取得了更优的结果。