LLM2D
带宽受限边缘网络上 decentralizer 学习的通信优化
Communication Optimization for Decentralized Learning atop Bandwidth-limited Edge Networks
作者: Tingyang Sun, Tuan Nguyen, Ting He
发布日期: 4/22/2025
arXiv ID: oai:arXiv.org:2504.12210v2

摘要

arXiv:2504.12210v2 宣告类型: replace-cross 摘要:去中心化的联邦学习(DFL)是一种将人工智能(AI)能力带到网络边缘的有前途的机器学习范式。然而,将DFL运行在边缘网络上由于代理间广泛的参数交换面临着严重的性能挑战。目前解决这些挑战的大多数解决方案基于简化的通信模型,无法捕捉多跳带宽有限网络上的学习情况。在这项工作中,我们通过联合设计由代理形成的覆盖网络的通信方案以及控制代理间通信需求的混合矩阵来解决这一问题。通过仔细分析我们问题的性质,我们将每个设计问题转化为可处理的优化问题,并开发出具有保证性能的高效算法。基于实际拓扑和数据的评估显示,所提出的算法能够将总训练时间减少超过80%(同时不牺牲准确性),并且与现有最先进的方法相比,大幅提高了计算效率。