LLM2D
无监督领域适调化通过风格意识中间领域
Unsupervised Domain Adaptation via Style-Aware Self-intermediate Domain
作者: Lianyu Wang, Meng Wang, Daoqiang Zhang, Huazhu Fu
发布日期: 2/4/2025
arXiv ID: oai:arXiv.org:2209.01870v3

摘要

arXiv:2209.01870v3 宣布类型: replace-cross 摘要:无监督领域适应(UDA)吸引了广泛关注,它将标签丰富的源域知识转移到相关但未标记的目标域。减少域间差异一直被认为是提高UDA性能的关键因素,特别是在源域和目标域之间存在巨大差距的任务中。为此,我们提出了一种新颖的风格意识特征融合方法(SAFF),以桥接大规模的域间差距,在转移知识的同时缓解类判别信息的损失。受人类传递推理和学习能力的启发,我们探索了一种新颖的风格意识自我中间域(SSID),通过一系列中间辅助合成概念将看似不相关的概念联系起来。具体来说,我们提出了SSID的一种新颖学习策略,从源域和目标域中选择样本作为锚点,然后随机融合这些锚点的对象特征和风格特征,生成带有标签和丰富风格的中间辅助特征,用于知识转移。此外,我们设计了一个外部记忆库来存储和更新指定的标签特征,以获得稳定的类特征和类别级别风格特征。基于提出的记忆库,我们设计了域内和域间损失函数以分别提高类识别能力和特征兼容性。同时,我们通过无限采样的方法模拟了SSID丰富的潜在特征空间,并通过数学理论收敛了损失函数。最后,我们在常用领域的适应性基准上进行了全面的实验以评估所提出的SAFF,并且实验结果表明,提出的SAFF可以方便地与不同的骨干网络结合,并作为一个即插即用模块获得更好的性能。