LLM2D
federated 领域泛化 với 标签平滑和平衡去中心化训练
Federated Domain Generalization with Label Smoothing and Balanced Decentralized Training
作者: Milad Soltany, Farhad Pourpanah, Mahdiyar Molahasani, Michael Greenspan, Ali Etemad
发布日期: 2/11/2025
arXiv ID: oai:arXiv.org:2412.11408v2

摘要

arXiv:2412.11408v2 宣布类型: replace-cross 摘要:在本文中,我们提出了一种新颖的方法,即联邦域泛化与标签平滑和平衡去中心化训练(FedSB),以应对联邦学习框架内部数据异质性带来的挑战。FedSB 在客户端层面采用了标签平滑技术,以防止过度拟合特定域的特征,从而在聚合本地模型形成全局模型时增强跨多种域的一般化能力。此外,FedSB 还结合了一种去中心化的预算机制,该机制平衡了客户端之间的训练,实验证明这种机制可以提高聚合的全局模型的性能。对四个常用的多域数据集(PACS、VLCS、OfficeHome 和 TerraInc)进行的大量实验表明,FedSB 超过了竞争对手的方法,在三个数据集上取得了最先进的结果,表明 FedSB 在处理数据异质性方面是有效的。