LLM2D
BiSeg-SAM:增强分割 Anything 模型中二元分割的弱监督后处理框架
BiSeg-SAM: Weakly-Supervised Post-Processing Framework for Boosting Binary Segmentation in Segment Anything Models
作者: Encheng Su, Hu Cao, Alois Knoll
发布日期: 4/3/2025
arXiv ID: oai:arXiv.org:2504.01452v1

摘要

arXiv:2504.01452v1 类型: cross 摘要:结直肠癌和皮肤癌的诊断中,结肠息肉和皮肤病变的精确分割是至关重要的。虽然已经开发了使用完全监督深度学习技术进行结肠息肉和皮肤病变分割的各种方法,但医生对医学图像进行像素级标注既耗时又成本高昂。基础视觉模型如段切一切模型(SAM)已经展示了卓越的性能;然而,直接将SAM应用于医学分割可能由于缺乏特定领域的医学知识而无法获得满意的结果。在本文中,我们提出了一种BiSeg-SAM,这是一种SAM引导的弱监督提示和边界细化网络,用于结肠息肉和皮肤病变的分割。具体来说,我们结合了一个CNN模块对SAM进行微调以学习局部特征。我们引入了弱盒(WeakBox),具有两个功能:自动生成SAM模型的框提示,并使用我们提出的多选择图填充到框(MM2B)转换进行粗略的图填充到框的转换,以解决粗略标签和精确预测之间的不匹配问题。此外,我们应用尺度一致性(SC)损失进行预测尺度对齐。我们的DetailRefine模块通过细化粗略预测以提高边界精度和分割准确性,同时仅使用有限的真实标签。这种综合方法使得BiSeg-SAM能够实现卓越的多任务分割性能。在对五个结肠息肉数据集和一个皮肤癌数据集进行测试时,我们的方法在所有先进的(SOTA)方法中表现出了显著的优越性。