摘要
arXiv:2406.09166v3 宣告类型: replace-cross
摘要:细粒度领域泛化(FGDG)比传统的领域泛化(DG)任务更具挑战性,因为它的小类间差异和相对大的类内差异。当领域分布发生变化时,细微特征的脆弱性会导致模型性能严重下降。然而,人类天生具有将知识泛化到分布外数据的能力,利用从类别共性和特定性中涌现出的结构化多粒度知识。同样地,我们提出了一种特征结构化领域泛化(FSDG)模型,在该模型中,特征经历结构化,分为普通、特定和共因部分,并与相关的语义概念和谐对齐,以提高FGDG中的性能。具体而言,特征结构化(FS)是通过五种约束的联合优化实现的:应用于拆分部分的去相关函数、三种确保常见特征一致性与特定特征独特性的约束,以及一个预测校准项。通过施加这些规定,FSDG 被促使基于多粒度知识拆分和对齐特征,从而帮助在类别间建立坚固的细微区别。通过在三个基准数据集上的广泛实验,FSDG 优于现有最先进的方法,FGDG 性能平均提高 6.2%。此外,对共享概念与模型通道之间显式概念匹配强度的可解释性分析,以及在各种主流模型架构上的实验,证实了FS的有效性。