LLM2D
因果概念图模型:超越深度学习中的因果不透明性
Causal Concept Graph Models: Beyond Causal Opacity in Deep Learning
作者: Gabriele Dominici, Pietro Barbiero, Mateo Espinosa Zarlenga, Alberto Termine, Martin Gjoreski, Giuseppe Marra, Marc Langheinrich
发布日期: 10/10/2024
arXiv ID: oai:arXiv.org:2405.16507v3

摘要

深度神经网络(DNN)模型决策背后的“隐藏”因果结构难以理解,这被称为因果不透明性。这导致人们无法依赖和验证最先进的基于DNN的系统,尤其是在高风险场景中。因此,规避DNN中的因果不透明性代表着深度学习、可解释性和因果关系交叉领域的一个关键开放性挑战。这项工作通过引入因果概念图模型(Causal CGMs)来解决这一差距,这是一种可解释性模型,其决策过程在设计上具有因果透明性。我们的实验表明,因果CGM可以:(i) 匹配因果不透明模型的泛化性能;(ii) 支持人工参与校正错误预测的中间推理步骤,不仅提高校正后的下游精度,而且提高特定实例所提供解释的可靠性;(iii) 支持干预和反事实场景的分析,从而提高模型的因果可解释性,并支持对其可靠性和公平性的有效验证。