摘要
arXiv:2409.09753v1 适应类型:跨域
摘要:在输入受到噪声/污染影响的情况下,测试时自适应(TTA)已成为缓解深度神经网络(DNNs)性能退化的一种实用解决方案。现有TTA方法持续适应DNN,由于缺乏监督导致的累积误差,这会引发资源消耗过多和性能下降的问题。为了解决这些问题,我们提出了领域感知实时动态适应(DARDA)。我们关键的方法是主动学习某些污染类型的部分潜在表示,每种类型都与一个专门用于正确分类受该污染影响的输入的子网络状态相关联。部署后,DARDA无需监督即可适应以前未见过的污染,通过以下步骤:(i)估计当前污染的潜在表示;(ii)选择与其相关联的污染在潜在空间中最接近当前污染的子网络;(iii)适应DNN状态,使其表示与当前污染一致。这样,DARDA更高效地利用资源,并能在不需要大量不同输入数据的情况下迅速适应由于不同污染引起的不同数据分布。通过在两个流行的移动边缘设备——树莓派和NVIDIA Jetson Nano上进行实验,我们展示了与现有技术相比,DARDA分别将能量消耗和平均缓存内存占用减少了1.74倍和2.64倍,同时在CIFAR-10、CIFAR-100和TinyImagenet上的性能分别提高了10.4%、5.7%和4.4%。