LLM2D
超球面原型学习几何的编码理论分析
A Coding-Theoretic Analysis of Hyperspherical Prototypical Learning Geometry
作者: Martin Lindstr\"om, Borja Rodr\'iguez-G\'alvez, Ragnar Thobaben, Mikael Skoglund
发布日期: 4/18/2025
arXiv ID: oai:arXiv.org:2407.07664v2

摘要

arXiv:2407.07664v2 宣告类型: replace-cross 摘要: 超球面原型学习(HPL)是一种监督式的表示学习方法,它在单位超球面上设计类别原型。这些原型使表示在比例不变且已知的几何结构下偏向于类别分离。此前的HPL方法存在以下缺点之一:(i) 采用一种不合原则的优化程序;或(ii) 在理论上是正确的,但只局限于一个可能的潜在维度。在本文中,我们解决了这两个缺点。为了应对(i),我们提出了一个合原则的优化程序,并证明其解是优化的。为了应对(ii),我们使用线性块码在宽范围的维度中构造了良好的分离原型。此外,我们从可实现和对偶界的角度完整地表征了最佳原型放置,展示了我们提出的方案几乎是最佳的。