arXiv:2502.02103v1 交叉类型: cross 摘要: 神经网络可能会自然地倾向于基于距离的表示，其中较小的激活表明与学习原型的接近程度较小。这与基于激活幅度的强度方法形成对比。为了测试这一假设，我们对六种受限于学习距离或强度表示的MNIST架构变体进行了实验。我们的结果表明，底层表示影响模型性能。我们开发了一种新的几何框架来解释这些发现，并引入了基于马哈拉诺比斯距离方程的新架构OffsetL2，以进一步验证该框架。这项工作强调，在神经网络设计中考虑基于距离的学习的重要性。