摘要
arXiv:2502.00182v2 宣布类型: 替换交叉
摘要:随着隐私关注和数据法规的增强,联邦学习(FL)已成为一种在不共享原始数据的情况下跨分布式数据源训练机器学习模型的有前景的方法。然而,在FL中的一项重大挑战是客户端数据通常是非IID(非独立且同分布)的,这导致其性能低于中心化学习。虽然已经提出了许多方法来解决这一问题,但它们的内在机制往往是从不同的角度来观察的。通过对从梯度下降到FL,以及从IID到非IID数据设置进行全面调查,我们发现客户端损失景观中的不一致性主要导致非IID场景下的性能下降。基于这一理解,我们观察到现有的方法可以分为两大类策略:(i) 调整参数更新路径和(ii) 修改客户端损失景观。这些发现为解决FL中非IID挑战提供了清晰的视角,并有助于指导该领域的未来研究。