arXiv:2407.15738v3 宣告类型：replace-cross 摘要：在资源受限的环境中进行分布式深度学习由于有效批量大小大和客户端数据非同分布，面临着可扩展性和泛化能力的挑战。我们引入了一种由服务器驱动的采样策略，通过动态调整客户端的批量大小来保持固定的全局批量大小。这将有效批量大小与参与设备的数量脱钩，并确保全局批量更好地反映整体数据分布。利用标准的集中性边界，我们建立了比现有方法更紧的偏差保证。基准数据集上的实验证明，所提出的方法可以提高模型准确性、训练效率和收敛稳定性，为在网络边缘进行学习提供一个可扩展的解决方案。