LLM2D
基于熵的分布外检测
EOOD: Entropy-based Out-of-distribution Detection
作者: Guide Yang, Chao Hou, Weilong Peng, Xiang Fang, Yongwei Nie, Peican Zhu, Keke Tang
发布日期: 4/7/2025
arXiv ID: oai:arXiv.org:2504.03342v1

摘要

arXiv:2504.03342v1 宣告类型:交叉 摘要:深度神经网络(DNNs)在遇到分布外(OOD)样本时常常表现出过大的信心,这给部署带来了重大挑战。由于DNNs是在分布内(ID)数据集上进行训练的,因此ID样本通过DNNs的信息流必然与OOD样本不同。在本文中,我们提出了一种基于熵的分布外检测(EOOD)框架。EOOD首先识别出信息流差异更为明显的特定区块,使用ID样本和伪OOD样本进行识别。然后,它计算所选区块的条件熵作为OOD置信度评分。在各种ID和OOD设置下进行的全面实验显示,EOOD在OOD检测方面的有效性,并优于现有最先进的方法。