LLM2D
柯尔莫哥洛夫-阿诺德网络自动编码器
Kolmogorov-Arnold Network Autoencoders
作者: Mohammadamin Moradi, Shirin Panahi, Erik Bollt, Ying-Cheng Lai
发布日期: 10/4/2024
arXiv ID: oai:arXiv.org:2410.02077v1

摘要

深度学习模型已彻底改变了各个领域,其中多层感知器 (MLP) 是数据回归和图像分类等任务的基石。然而,最近的一项研究引入了 Kolmogorov-Arnold 网络 (KAN) 作为 MLP 的有希望的替代方案,利用放置在边而不是节点上的激活函数。这种结构上的转变使 KAN 与 Kolmogorov-Arnold 表示定理紧密相符,有可能提高模型的准确性和可解释性。在本研究中,我们探讨了 KAN 在通过自动编码器进行数据表示方面的有效性,将它们的性能与传统卷积神经网络 (CNN) 在 MNIST、SVHN 和 CIFAR-10 数据集上的性能进行了比较。我们的结果表明,基于 KAN 的自动编码器在重建精度方面取得了具有竞争力的性能,从而表明它们作为数据分析任务中有效工具的可行性。