摘要
数据和模型异构性是异构联邦学习 (HtFL) 的两个核心问题。在模型架构异构的场景中,聚合模型参数变得不可行,导致使用原型(即类别代表特征向量)进行聚合和引导。然而,在与全局原型对齐时,它们仍然存在额外引导目标与客户端原始局部目标之间的不匹配。因此,我们提出了一种联邦学习引导 (FedL2G) 方法,该方法以联邦方式自适应地学习引导本地训练,并确保额外的引导对客户端的原始任务是有益的。FedL2G 在理论保证下,仅使用模型参数的一阶导数高效地实现了学习引导过程,并实现了 O(1/T) 的非凸收敛速度。我们使用 14 种异构模型架构(例如,CNN 和 ViTs)在两种数据异构性和六种模型异构性设置上进行了大量实验,以证明 FedL2G 相比于六种同类方法的优越性能。