摘要
arXiv:2209.14946v3 宣告类型: replace-cross
摘要:本文开发了一种新的EiHi网络,以解决深度学习中的离群分布(OoD)泛化问题。EiHi网络是一种可以在任何视觉骨干上实现的模型学习范式。这种范式可以改变深度模型的先前学习方法,即找出归纳样本特征与相应类别之间的关联,而这些关联遭受了不确定特征与标签之间虚假关联的影响。我们通过明确且动态地建立原始-正样本-负样本配对作为最小的学习元素,将SimCLR和VIC-Reg融合起来,深度模型在迭代中建立特征与标签之间的关系,同时抑制虚假关联。为了进一步验证所提出模型,并加强建立的因果关系,我们开发了一种人工在回路策略,利用少量指导样本直接修剪表示空间。最后,结果显示,所开发的EiHi网络在最具挑战性和典型的OoD数据集Nico上取得了显著改进,与当前的SOTA结果相比,无需任何领域(例如背景、无关特征)信息。