LLM2D
最优因果表征与因果信息瓶颈
Optimal Causal Representations and the Causal Information Bottleneck
作者: Francisco N. F. Q. Simoes, Mehdi Dastani, Thijs van Ommen
发布日期: 10/2/2024
arXiv ID: oai:arXiv.org:2410.00535v2

摘要

为了有效地研究复杂的因果系统,构建能够简化系统部分的表示方法通常很有用,这些表示方法能够丢弃无关细节,同时保留关键特征。信息瓶颈 (IB) 方法是一种广泛应用于表示学习的方法,它在保留目标变量信息的同时压缩随机变量。传统的 IB 方法纯粹是统计性的,忽略了潜在的因果结构,使其不适合因果任务。我们提出了因果信息瓶颈 (CIB),它是 IB 的因果扩展,它在保持对目标变量的因果控制的同时压缩一组选定的变量。该方法产生的表示具有因果可解释性,并且可以在推理干预时使用。我们展示了实验结果,证明所学表示准确地捕获了预期的因果关系。