摘要
arXiv:2410.06665v2 公告类型: 替换交叉
摘要:本文探讨了置换及相关群的表示的等变线性层的表征。与传统的使用参数共享的方法不同,我们采用了一种基于不可约表示和舒尔引理的替代方法。使用这种方法,我们为现有的模型如DeepSets、2-IGN图的等变网络和Deep Weight Space (DWS)网络提供了另一种推导。对于DWS网络的推导比以前的结果简单得多。
接下来,我们将我们的方法扩展到未对齐的对称集,要求这些集对应于群的嵌入积的等变性。之前的工作在相当局限的条件下处理了这个问题,其中几乎所有的嵌入积等变层都是Siamese层。相反,我们在这个情况下完全表征了这些层,并表明在某些情况下存在大量的额外非Siamese层。我们还通过实验表明,在图异常检测、权重空间对齐和学习Wasserstein距离等任务中,这些额外的非Siamese层可以提高性能。我们的代码可在 \href{https://github.com/yonatansverdlov/Irreducible-Representations-of-Deep-Weight-Spaces}{GitHub} 获取。