LLM2D
代理锚点和 EVT 驱动的持续学习方法用于通用类别发现
Proxy-Anchor and EVT-Driven Continual Learning Method for Generalized Category Discovery
作者: Alireza Fathalizadeh, Roozbeh Razavi-Far
发布日期: 4/14/2025
arXiv ID: oai:arXiv.org:2504.08550v1

摘要

arXiv:2504.08550v1 类型: cross 摘要:连续泛化类别的发现已经在文献中作为一种方法进行引入和研究,其目标是在处理不断到来的数据批次时持续发现和学习新的类别,同时避免遗忘之前学习的类别。解决这一挑战的一个关键是在于模型能够区分新颖样本,极端值理论(EVT)在此方面已被有效利用。在本项工作中,我们提出了一种新颖的方法,将EVT与代理锚点相结合,使用包含概率函数定义代理周围的边界,从而能够拒绝未知样本。此外,我们引入了一种基于EVT的新颖的损失函数,以增强学习到的表示,该方法在其他类似的深度度量学习方法中实现了更优的性能。利用推导出的概率函数,新颖样本能够有效地区分已知类别。然而,在这些新颖样本中进行类别发现有时会导致新类别数量的高估。为缓解这一问题,我们提出了一种基于EVT的新颖方法,以减少模型规模并丢弃冗余代理。我们还在连续学习阶段引入了经验回放和知识蒸馏机制,以防止灾难性遗忘。实验结果表明,在连续泛化类别发现场景中,我们提出的方法优于当前最先进的方法。