arXiv:2410.02147v2 宣传类型: 替换交叉 摘要: 在本文中，我们提出了一种在时间序列上下文中高效源-free领域适应(SFDA)的框架，旨在提高参数效率和数据样本利用效率。我们的方法引入了改进的源模型准备和目标侧适应范式，旨在在目标适应期间提高训练效率。具体来说，我们以Tucker风格分解源模型的权重，在源模型准备阶段将模型因子化为紧凑形式。在目标侧适应期间，仅微调这些分解因子的一部分，从而显著提高了训练效率。我们使用PAC贝叶斯分析证明，这种选择性的微调策略通过限制模型的学习能力隐式地正则化了适应过程。此外，这种重新参数化减少了整体模型大小并提高了推断效率，使该方法特别适用于资源受限的设备。另外，我们证明了该框架与其他各种SFDA方法兼容，并在保持模型性能的同时，将需要微调的参数数量和MACs的推断开销减少了超过90%。