摘要
arXiv:2504.14727v1 声明类型: cross
摘要:人类和大多数动物天生具有持续获取新经验和随着时间积累世事知识的独特能力。这种能力,称为持续学习,对深度神经网络(DNNs)在开放环境中适应动态变化的世界也是至关重要的。然而,当DNNs在顺序任务上进行训练时,它们通常会遭受灾难性遗忘的困扰,即忘记之前学习的知识。在这项工作中,受交互式人类记忆和学习系统的启发,我们提出了一种新颖的生物模拟能力持续学习框架,该框架整合了半参数化记忆和清醒-睡眠巩固机制。我们的方法首次使深度神经网络能够在现实世界的持续学习挑战场景中保留对新任务的高性能,同时保持先前的知识,例如在ImageNet上的类增量学习。这项研究显示,模仿生物智能为赋予深度神经网络持续学习能力提供了有希望的途径。