arXiv:2504.11558v1 类别: cross 摘要: 我们介绍了错误广播和脱相关(EBD)算法，这是一种新颖的学习框架，通过直接广播输出误差到各个层来解决神经网络中的信用分配问题。利用最小均方误差(MMSE)估计器的随机正交性特性，EBD定义了逐层的损失函数来惩罚层激活和输出误差之间的相关性，提供了一种无需权重传输的错误广播的原理性方法。优化框架自然地导致了实验中观察到的三因素学习规则，并与生物可实现的框架集成，以提高性能和可行性。数值实验表明，EBD在基准数据集上的性能与已知的错误广播方法相当或更好。尽管EBD在非常大规模或复杂的数据集上的可扩展性仍需进一步探索，但我们的发现表明它提供了一种生物可实现、高效且适应性强的神经网络训练替代方案。这种方法可能为未来的人工和自然学习范式的进步提供指导。