LLM2D
联邦持续学习:概念、挑战和解决方案
Federated Continual Learning: Concepts, Challenges, and Solutions
作者: Parisa Hamedi, Roozbeh Razavi-Far, Ehsan Hallaji
发布日期: 2/12/2025
arXiv ID: oai:arXiv.org:2502.07059v1

摘要

arXiv:2502.07059v1 宣告类型: cross 摘要:联邦持续学习(FCL)已成为在动态环境中进行协作模型训练的稳健解决方案,其中数据样本持续生成并分布在多个设备上。本文综述了FCL,重点关注异质性、模型稳定性、通信开销和隐私保护等关键挑战。我们探讨了各种形式的异质性及其对模型性能的影响。在努力展示处理异质性数据分布的复杂性时,我们回顾了非IID数据、资源受限平台和个人化学习的各种解决方案。随后,我们回顾了确保模型稳定性和避免灾难性遗忘的技术,在非稳态环境中这是至关重要的。隐私保护技术是本文FCL工作中另一方面的内容。本文综述将联邦学习和持续学习的见解结合起来,提供了提高FCL系统有效性和可扩展性的策略,使其适用于广泛的现实场景。