LLM2D
拆解 VAEs 中的数据缝合:理解去纠缠性
Unpicking Data at the Seams: Understanding Disentanglement in VAEs
作者: Carl Allen
发布日期: 2/7/2025
arXiv ID: oai:arXiv.org:2410.22559v4

摘要

arXiv:2410.22559v4 Announce Type: replace-cross 摘要:解耦,即识别统计数据独立的因子,在从受控数据生成和稳健分类到高效编码以及提高我们对数据本身的理解等诸多机器学习领域都是相关的。解耦在多种生成范式中出现,包括变分自编码器(VAEs)、生成对抗网络和扩散模型。最近在VAEs中理解解耦方面取得了一些进展,其中显示了一种对角后验协方差矩阵的选择促进了解码器雅可比矩阵列之间的相互正交性。在此基础上,我们展示了这种正交性,即一个几何性质,如何转化为解耦,即一个统计性质,进一步加深了我们对VAE如何识别数据的独立分量或解耦数据的理解。