摘要
为了在保留基础(旧)类知识的同时,仅用少量样本增量学习新类,小样本类增量学习(FSCIL)面临着过拟合和灾难性遗忘等诸多挑战。这种具有挑战性的问题通常通过固定在基础类上训练的特征提取器来解决,以减少过拟合和遗忘的不利影响。在这种情况下,我们的主要关注点是基础类上的表示学习,以解决 FSCIL 的独特挑战:同时实现学习表示的可迁移性和可区分性。在最近为增强可迁移性(例如促进特征扩散)而做出的努力的基础上,我们发现,尝试在更受限的特征空间内确保特征扩散,可以让学习到的表示在可迁移性和可区分性之间取得更好的平衡。因此,与之前认为类间距离应该最大化的观点形成鲜明对比,我们认为,不同的类越接近,对 FSCIL 越有利。从信息瓶颈理论的角度进行的实证结果和分析证明了我们简单但看似违反直觉的表示学习方法,提出了研究问题并提出了替代研究方向。代码可在 https://github.com/JungHunOh/CLOSER_ECCV2024 获取。