LLM2D
算法因果结构通过压缩涌现
Algorithmic causal structure emerging through compression
作者: Liang Wendong, Simon Buchholz, Bernhard Sch\"olkopf
发布日期: 2/19/2025
arXiv ID: oai:arXiv.org:2502.04210v2

摘要

arXiv:2502.04210v2 更新类型: replace-cross 摘要: 我们探讨因果关系、对称性和压缩之间的关系。我们在学习与压缩之间的已知联系的基础上进行了扩展和推广,应用到因果模型不可识别的环境中。我们提出了一种框架,在这种框架中,因果关系作为一种在多个环境中压缩数据的后果而出现。我们定义了算法因果性作为一种在传统因果识别假设不成立时的因果性的替代定义。我们展示了如何在无需了解干预目标的情况下,通过最小化柯氏复杂性的上界来产生算法因果性和对称结构。我们假设这些见解也可能为因果关系在大型语言模型等机器学习模型中的出现提供一个新颖的观点,在这些模型中,因果关系可能无法明确识别。