LLM2D
通过霍勒尔散度进行多视图表示学习的不确定性量化
Uncertainty Quantification via H\"older Divergence for Multi-View Representation Learning
作者: Yan Zhang, Ming Li, Chun Li, Zhaoxia Liu, Ye Zhang, Fei Richard Yu
发布日期: 4/18/2025
arXiv ID: oai:arXiv.org:2411.00826v2

摘要

arXiv:2411.00826v2 宣告类型: 替换-交叉 摘要:证据驱动的深度学习代表了一种蓬勃发展的不确定性估计范式,能够在几乎忽略额外计算开销的情况下提供可靠的预测。现有方法通常采用Kullback-Leibler散度来估计网络预测的不确定性,忽略了不同模态之间的领域差距。为了应对这一问题,本文提出了一种基于Hölder散度(HD)的新算法,以通过解决不完整或噪声数据带来的固有不确定性挑战来增强多视图学习的可靠性。一般来说,我们的方法通过并行网络分支提取多种模态的表示,然后利用HD估计预测不确定性。通过Dempster-Shafer理论,从不同模态中集成不确定性,从而生成一个综合结果,考虑到所有可用的表示。从数学上讲,HD证明了更好地衡量真实数据分布与模型预测分布之间的“距离”,并改善了多类别识别任务的性能。具体而言,我们的方法在所有评估基准上超越了现有的最先进的方法。我们进一步在不同的骨干网络上进行了广泛的实验,以验证我们优于的鲁棒性。研究表明,我们的方法成功地推动了相应的性能边界。最后,我们在更具挑战性的场景下进行了实验,即学习不完整或噪声数据,显示我们的方法对这种被污染的数据有很高的容忍度。