摘要
近年来,少样本类增量学习(FSCIL)方法的兴起凸显了在 FSCIL 学习器中维持强健抗遗忘能力的关键挑战。本文提出了一种基于数学泛化的新颖抗遗忘概念,并利用神经切线核(NTK)视角进行阐释。我们的方法侧重于两个关键方面:确保最佳 NTK 收敛和最小化 NTK 相关的泛化损失,这两者是跨任务泛化的理论基础。为了实现全局 NTK 收敛,我们引入了一种原理性的元学习机制,引导扩展网络架构内的优化。同时,为了减少 NTK 相关的泛化损失,我们系统地优化其组成因素。具体而言,我们首先在基础会话上进行自监督预训练,以增强 NTK 相关的泛化潜力。然后,通过课程对齐仔细调整这些自监督权重,接着应用专门针对卷积层和线性层的双 NTK 正则化。通过这些措施的综合作用,我们的网络获得了强健的 NTK 属性,确保了 NTK 矩阵的最佳收敛和稳定性,并最小化了 NTK 相关的泛化损失,显著提高了其理论泛化能力。在流行的 FSCIL 基准数据集上,我们的 NTK-FSCIL 优于现有的最先进方法,将最终会话的准确率提高了 2.9% 至 9.3%。