LLM2D
通过可解释视觉概念实现表征相似性
Representational Similarity via Interpretable Visual Concepts
作者: Neehar Kondapaneni, Oisin Mac Aodha, Pietro Perona
发布日期: 4/1/2025
arXiv ID: oai:arXiv.org:2503.15699v2

摘要

arXiv:2503.15699v2 宣布类型:替换交叉 摘要:两个深度神经网络在做出决策时有何不同?测量深度网络之间的相似性是一个长期存在的开放问题。现有的大多数方法在给定层提供一个单一的数字来衡量两个网络的相似性,但无法揭示使它们相似或不同的原因。我们引入了一种可解释的表示相似性方法(RSVC),用于比较两个网络。我们使用RSVC来发现两个模型之间的共享和独特视觉概念。我们证明,某些模型差异方面可以归因于一个模型发现的独特概念,而这些概念在另一个模型中并没有很好地体现。最后,我们在不同的视觉模型架构和训练协议上进行了广泛的评估,以证明其有效性。