LLM2D
FreqX:神经网络学习的是网络设计者所说的内容
FreqX: What neural networks learn is what network designers say
作者: Zechen Liu
发布日期: 11/28/2024
arXiv ID: oai:arXiv.org:2411.18343v1

摘要

个性化联邦学习 (PFL) 允许客户端协作训练个性化模型,而无需泄露其私有数据集。然而,PFL 存在非独立同分布 (Non-IID) 数据、异构设备、缺乏公平性以及贡献不明确等问题,这些问题迫切需要深度学习模型的可解释性来克服。这些挑战对可解释性提出了新的要求:低成本、隐私保护和详细信息。目前尚无任何可解释性方法能够满足这些要求。本文提出了一种新颖的可解释性方法 \emph{FreqX},该方法引入了信号处理和信息论。我们的实验表明,FreqX 的解释结果包含属性信息和概念信息。FreqX 的运行速度至少比包含概念信息的基线方法快 10 倍。