LLM2D
统一联邦学习: Enables 分散式跨孤岛联邦学习
UnifyFL: Enabling Decentralized Cross-Silo Federated Learning
作者: Sarang S, Druva Dhakshinamoorthy, Aditya Shiva Sharma, Yuvraj Singh Bhadauria, Siddharth Chaitra Vivek, Arihant Bansal, Arnab K. Paul
发布日期: 4/29/2025
arXiv ID: oai:arXiv.org:2504.18916v1

摘要

arXiv:2504.18916v1 宣言类型: cross 摘要:联邦学习(FL)是一种分散的机器学习(ML)范式,在这种范式中,模型在称为客户端的多个设备上的私人数据上进行训练,并在网络节点称为聚合器的单一节点处合并,而不是本身合并数据。许多组织采用联邦学习以获得更好的隐私意识的ML驱动决策能力。然而,由于缺乏有效的协作机制,组织往往独立运营而不太倾向于合作以增强其联邦学习能力。挑战在于在信任和资源效率之间找到平衡。一种方法依赖于信任第三方聚合器来汇总来自所有组织的模型(多层次联邦学习),但这种方法要求信任一个可能带有偏见或不可靠的实体。或者,组织可以通过直接共享其本地模型来绕过第三方,这需要大量的计算资源来进行验证。这两种方法都反映了信任和资源限制之间的根本权衡,两者都无法提供理想的解决方案。在本文中,我们开发了一个基于信任的跨存档联邦学习框架,称为 \proj,该框架使用分散的编排和分布式存储。 \proj 为参与的组织提供了灵活性,并提供了同步和异步模式来处理拖后腿者。在多样化的测试平台上进行的评估表明,\proj 在允许信任和最优资源使用的同时,实现了与理想的多层次集中式联邦学习相当的性能。