LLM2D
贝叶斯联邦学习用于持续训练
Bayesian Federated Learning for Continual Training
作者: Usevalad Milasheuski, Luca Barbieri, Sanaz Kianoush, Monica Nicoli, Stefano Savazzi
发布日期: 4/23/2025
arXiv ID: oai:arXiv.org:2504.15328v1

摘要

arXiv:2504.15328v1 Announce Type: cross 摘要:贝叶斯联邦学习(BFL)能够在分布式学习中实现不确定性量化和鲁棒适应。与频率主义方法不同,它估计全局模型的后验分布,提供有关模型可靠性的见解。然而,目前的BFL方法忽视了在动态环境下的持续学习挑战,其中数据分布会随时间变化。我们提出了一种应用于雷达数据的持续BFL框架,雷达数据在几天内收集,以进行人类感应。利用随机梯度 Langevin 动力学(SGLD),我们的方法顺序更新模型,并利用过去的后验分布为新任务构建先验。我们针对几种基线,评估了我们方法的准确性、预期校准误差(ECE)和收敛速度。结果强调了持续贝叶斯更新在保存知识并适应演变数据方面的有效性。