LLM2D
DiCoTTA:领域不变学习以实现持续测试时适应
DiCoTTA: Domain-invariant Learning for Continual Test-time Adaptation
作者: Sohyun Lee, Nayeong Kim, Juwon Kang, Seong Joon Oh, Suha Kwak
发布日期: 4/8/2025
arXiv ID: oai:arXiv.org:2504.04981v1

摘要

arXiv:2504.04981v1 种类: 横跨领域 摘要:本文研究了持续测试时自适应(CTTA),即在保持之前学习的知识的同时,使模型能够适应不断变化的未见领域。现有的CTTA方法主要集中在对当前测试领域的适应,而忽视了模型在未来可能遇到的任意测试领域的泛化能力。为解决这一局限,我们提出了一种新颖的在线领域不变学习框架,称为DiCoTTA。DiCoTTA旨在在测试过程中实时学习既能保持当前又能适应过去测试领域不变特征表示。为此,我们提出了一种新的模型架构和测试时自适应策略,专注于学习不变领域特征而不破坏语义内容,还提出了一种新的数据结构和优化算法,以有效管理来自之前测试领域的信息。DiCoTTA在四个公开的CTTA基准测试中达到了最先进的性能。此外,它在未见测试领域的泛化能力也表现出优越性。