LLM2D
星联联邦:一种资源高效的低轨卫星辅助异构联邦学习框架
SatFed: A Resource-Efficient LEO Satellite-Assisted Heterogeneous Federated Learning Framework
作者: Yuxin Zhang, Zheng Lin, Zhe Chen, Zihan Fang, Wenjun Zhu, Xianhao Chen, Jin Zhao, Yue Gao
发布日期: 9/27/2024
arXiv ID: oai:arXiv.org:2409.13503v2

摘要

传统的联邦学习(FL)框架严重依赖陆地网络,而覆盖范围限制和日益严重的带宽拥堵严重阻碍了模型收敛。幸运的是,低地球轨道(LEO)卫星网络的进步为增强传统陆地 FL 提供了有希望的新通信途径。尽管存在这种潜力,但有限的卫星地面通信带宽以及地面设备异构运行环境(包括数据、带宽和计算能力的变化)对有效和稳健的卫星辅助 FL 构成了重大挑战。为了应对这些挑战,我们提出了 SatFed,这是一个资源高效的卫星辅助异构 FL 框架。SatFed 实施了基于新鲜度的模型优先级队列,以优化对高度受限的卫星地面带宽的使用,确保传输最关键的模型。此外,构建了一个多图来捕获设备之间的实时异构关系,包括数据分布、陆地带宽和计算能力。这种多图使 SatFed 能够将卫星传输的模型聚合到同行指导中,从而增强异构环境中的本地训练。使用真实世界 LEO 卫星网络进行的大量实验表明,与最先进的基准相比,SatFed 实现了卓越的性能和鲁棒性。