摘要
arXiv:2504.02008v1 基础医学分割模型:交叉
摘要:基础医学分割模型,在MedSAM最为流行的情况下,已经在不同器官和病灶上取得了令人瞩目的性能。然而,MedSAM在结构和外观复杂的特定病灶上仍然存在性能妥协的问题,以及边界框提示引起的扰动。尽管当前医学图像分割的测试时间适配(TTA)方法可以解决这一问题,但部分(例如,批量标准化)或整个参数更新限制了它们的效果,因为在大型模型中受限的更新信号会导致灾难性遗忘。同时,这些方法忽略了适配过程中的计算复杂性,这对现代基础模型尤为重要。为了应对这一挑战,我们的理论分析表明,在MedSAM架构下,直接精炼图像嵌入是可行的方法,这使得我们能够在不面临灾难性遗忘风险的情况下实现高计算效率和分割性能。在这一框架下,我们提出了一种利用拟合后的潜在条件随机场损失和熵最小化损失相结合的方法,以鼓励最大化后验预测概率的因子化条件概率。实验结果显示,在三个数据集中,我们实现了大约3%的Dice分数提高,同时计算复杂度降低了7倍以上。