摘要
与传统的人工神经网络 (ANN) 相比,脉冲神经网络 (SNN) 因其能够以更高效的能耗方式传输信息而受到了广泛的学术关注。然而,尽管之前已经通过各种方法对 SNN 的学习算法进行了优化,但 SNN 的性能仍然落后于 ANN。最近提出的多阈值模型为进一步增强 SNN 的学习能力提供了更多可能性。本文从数学角度严格分析了多阈值模型、普通脉冲模型和量化 ANN 之间的关系,然后提出了一种新颖的 LM-HT 模型,这是一种等距多阈值模型,可以在时间维度上动态调节全局输入电流和膜电位泄漏。LM-HT 模型也可以通过重新参数化转换为普通的单阈值模型,从而实现更灵活的硬件部署。此外,我们注意到 LM-HT 模型可以在特殊初始化下与 ANN-SNN 转换框架无缝集成。这种新颖的混合学习框架可以有效提高在低时间延迟下转换后的 SNN 的相对较差的性能。大量的实验结果表明,我们的模型在各种数据集上都优于以往最先进的工作,这使得 SNN 达到了与量化 ANN 相当的全新性能水平。代码可在 https://github.com/hzc1208/LMHT_SNN 获取。