从人脑的角度来看，持续学习可以执行各种任务而不会相互干扰。在神经元的稀疏性和选择性中可以找到减少相互干扰的有效方法。根据 Aljundi 等人和 Hadsell 等人，在表征层面上施加稀疏性有利于持续学习，因为稀疏的神经元激活鼓励参数之间的重叠更少，从而导致更少的干扰。类似地，高度选择性的神经网络可能会导致更少的干扰，因为神经元中的特定响应会减少与其他参数重叠的机会。考虑到人脑在整个生命周期内进行持续学习，找到稀疏性和选择性自然出现的条件可能为理解大脑功能提供见解。本文研究了自然增加神经网络稀疏性和选择性的各种条件。本文在 MNIST 分类任务中使用 Hoyer 稀疏性度量和 CCMAS 选择性度量测试了不同的优化器。值得注意的是，关于各种条件下稀疏性和选择性自然发生的调查，直到今天还没有在神经科学或机器学习的任何领域得到认可。本文发现，某些条件会增加稀疏性和选择性，例如应用较大的学习率和降低批量大小。除了条件、稀疏性和选择性之间的关系外，还将根据经验分析讨论以下内容：1. 稀疏性和选择性之间的关系；2. 测试精度、稀疏性和选择性之间的关系。