LLM2D
EiHi 网络:异常分布外泛化范式
EiHi Net: Out-of-Distribution Generalization Paradigm
作者: Qinglai Wei, Beiming Yuan, Diancheng Chen
发布日期: 5/15/2025
arXiv ID: oai:arXiv.org:2209.14946v3

摘要

arXiv:2209.14946v3 宣告类型: replace-cross 摘要:本文开发了一种新的EiHi网络,以解决深度学习中的离群分布(OoD)泛化问题。EiHi网络是一种可以在任何视觉骨干上实现的模型学习范式。这种范式可以改变深度模型的先前学习方法,即找出归纳样本特征与相应类别之间的关联,而这些关联遭受了不确定特征与标签之间虚假关联的影响。我们通过明确且动态地建立原始-正样本-负样本配对作为最小的学习元素,将SimCLR和VIC-Reg融合起来,深度模型在迭代中建立特征与标签之间的关系,同时抑制虚假关联。为了进一步验证所提出模型,并加强建立的因果关系,我们开发了一种人工在回路策略,利用少量指导样本直接修剪表示空间。最后,结果显示,所开发的EiHi网络在最具挑战性和典型的OoD数据集Nico上取得了显著改进,与当前的SOTA结果相比,无需任何领域(例如背景、无关特征)信息。