LLM2D
低级特征隐藏着跨域少样本分割的奥秘
The Devil is in Low-Level Features for Cross-Domain Few-Shot Segmentation
作者: Yuhan Liu, Yixiong Zou, Yuhua Li, Ruixuan Li
发布日期: 3/28/2025
arXiv ID: oai:arXiv.org:2503.21150v1

摘要

arXiv:2503.21150v1 Announce Type: 交叉 摘要:跨域少样本分割(CDFSS)提出了一种方法,将从大规模源域数据集学习到的像素级分割能力转移到下游目标域数据集上,只需每个类别的几幅标注图像。在本文中,我们关注CDFSS中一个已观察到但未解决的现象:对于目标域,特别是那些与源域相距甚远的目标域,分割性能在很早的训练周期达到峰值,并随着源域训练的进行急剧下降。我们深入探讨了这一现象的解释:低级特征容易受到领域转移的影响,导致在源域训练过程中出现更尖锐的损失景观,这是CDFSS的敌人。基于此现象及其解释,我们进一步提出了一种方法,包括两个即插即用模块:一个模块在源域训练期间对低级特征的损失景观进行拉平,作为一种新颖的锋利度感知最小化方法;另一个模块在目标域测试期间利用基于低级特征的校准直接补充目标域信息。在四个目标数据集上的广泛实验验证了我们的理论,并表明我们的方法在1-shot和5-shot场景中分别在平均MIoU上显著超过了当前最先进的方法3.71%和5.34%。