LLM2D
低层参数的随机性决定了基于DNN交互表示的迷惑样本
Randomness of Low-Layer Parameters Determines Confusing Samples in Terms of Interaction Representations of a DNN
作者: Junpeng Zhang, Lei Cheng, Qing Li, Liang Lin, Quanshi Zhang
发布日期: 2/13/2025
arXiv ID: oai:arXiv.org:2502.08625v1

摘要

arXiv:2502.08625v1 类型: cross 摘要: 在本文中,我们发现深度神经网络(DNN)编码的交互复杂性可以解释其泛化能力。我们还发现,由非泛化交互表示的DNN的混淆样本是由其低层参数决定的。相比之下,其他因素,如高层参数和网络架构,对混淆样本的组成影响较小。两个具有不同低层参数的DNN通常具有完全不同的混淆样本集,即使它们具有相似的性能。这一发现扩展了彩票票假说的理解,并很好地解释了不同DNN的独特表示能力。