LLM2D
最优因果表征与因果信息瓶颈
Optimal Causal Representations and the Causal Information Bottleneck
作者: Francisco N. F. Q. Simoes, Mehdi Dastani, Thijs van Ommen
发布日期: 10/2/2024
arXiv ID: oai:arXiv.org:2410.00535v1

摘要

为了有效地研究复杂的因果系统,构建简化系统部分的表示方法通常很有用,这些方法通过丢弃不相关细节来保留关键特征。信息瓶颈 (IB) 方法是一种广泛应用于表示学习的方法,它压缩随机变量,同时保留关于目标变量的信息。传统的 IB 等方法纯粹是统计性的,忽略了潜在的因果结构,因此不适合因果任务。我们提出了因果信息瓶颈 (CIB),它是 IB 的因果扩展,它压缩一组选定的变量,同时保持对目标变量的因果控制。该方法产生的表示是因果可解释的,并且可以在推理干预时使用。我们展示了实验结果,证明学习到的表示如预期的那样准确地捕获了因果关系。