arXiv:2502.10587v1 交叉发布类型：cross 摘要：深度异方差回归模型通过神经网络来拟合目标分布的均值和方差。挑战来自于异方差性，这意味着方差是样本相关的且通常是未知的。因此，最近的方法通过无监督框架来学习方差，不幸的是，这种方法在计算复杂性和准确性之间产生了权衡。尽管可以通过监督来缓解这种权衡，但获取方差的标签并不容易。在这里，我们研究深度异方差回归中的自监督方差估计。我们探讨了两个问题：（1）假设存在真实标签，我们应如何监督方差？（2）在没有真实标签的情况下，我们如何获得伪标签？我们通过分析两种流行的度量标准：KL 散度和2- Wasserstein距离来解决（1）。随后，我们推导出一个针对非交换协方差的正态分布之间2-Wasserstein距离的上界，该上界具有优化稳定性。我们通过一个简单的基于邻域的启发式算法来解决（2），该算法产生了出乎意料有效的方差伪标签。我们在合成数据集和真实数据集上的实验表明，所提出的2-Wasserstein界限与伪标签注释相结合，导致了一种计算成本较低但准确的深度异方差回归方法。