LLM2D
GLOCALFAIR:联合提升联邦学习中全局和局部群体公平性
GLOCALFAIR: Jointly Improving Global and Local Group Fairness in Federated Learning
作者: Syed Irfan Ali Meerza, Luyang Liu, Jiaxin Zhang, Jian Liu
发布日期: 10/4/2024
arXiv ID: oai:arXiv.org:2401.03562v2

摘要

联邦学习(FL)已成为一种很有前途的解决方案,可在不牺牲数据隐私的情况下,在多个客户端之间协作学习共享模型。然而,由于联邦学习的固有属性,例如数据异质性和参与方选择,联邦学习的模型往往会对某些人口群体(例如种族和性别群体)产生偏见。与集中式学习不同,缓解联邦学习中的偏见尤其具有挑战性,因为私有训练数据集及其敏感属性通常无法直接访问。该领域的大多数先前研究仅关注全局公平性,而忽略了单个客户端的局部公平性。此外,现有方法通常需要共享有关客户端本地数据集的敏感信息,这是不可取的。为了解决这些问题,我们提出了 GLOCALFAIR,这是一个客户端-服务器协同设计公平框架,它可以在无需了解客户端私有数据集的敏感统计信息的情况下,共同提高联邦学习中的全局和局部群体公平性。具体而言,我们利用约束优化在客户端侧强制执行局部公平性,并在服务器端采用公平感知的基于聚类的聚合,以进一步确保不同敏感群体之间的全局模型公平性,同时保持较高的效用。在两个图像数据集和一个带有各种最先进公平基线的表格数据集上的实验表明,GLOCALFAIR 可以在全局和局部数据分布下实现增强的公平性,同时保持良好的效用和客户端公平性水平。