arXiv:2504.16357v1 类型: cross 摘要: 个性化联邦学习（PFL）因其能够处理异构客户端数据分布并保留数据隐私的能力而受到了广泛关注。然而，当本地客户端数据有限时，深度学习模型往往遭受训练不足的影响，导致性能不佳。基础模型，如CLIP（对比语言-图像预训练），具有强大的特征提取能力，并且可以通过在有限的本地数据上进行微调来缓解这一问题。尽管这些基础模型有着巨大的潜力，但在联邦学习场景中利用它们的情况却很少见，且与新客户端集成相关的挑战依然亟待解决。为应对这些挑战，我们提出了双重提示个性化联邦学习（DP2FL）框架，该框架引入了双重提示和自适应聚合策略。DP2FL 结合了全局任务意识和基于本地数据的见解，使本地模型能够实现有效的泛化，同时保持对特定数据分布的适应性。此外，DP2FL 引入了一个全局模型，该模型能够在新数据源上进行预测，并无缝集成新添加的客户端而无需重新训练。在高度异构环境中的实验结果验证了DP2FL 提示设计和聚合策略的有效性，强调了新数据源预测的优势，并展示了新客户端无缝集成到联邦学习框架中的能力。