摘要
arXiv:2502.10419v1 交叉公告类型
摘要:联邦学习(FL)、多模态大型语言模型(MLLMs)和边缘云计算相结合,能够在保护边缘设备和云基础设施之间隐私的同时实现分布式和实时数据处理。然而,在资源受限的边缘设备环境中部署MLLMs在FL环境中带来了重大挑战,包括资源管理、通信开销和非IID数据。为了解决这些挑战,我们提出了一种新的混合框架,在这种框架中,带有充足资源和电池寿命的边缘设备上部署MLLMs,而大部分训练则在云中进行。为了识别适合部署的边缘设备,我们采用粒子群优化(PSO)来识别边缘设备,利用蚂蚁 colony 优化算法(ACO)来优化边缘节点与云节点之间模型更新的传输。这一基于群智能的框架旨在通过在云中进行大量训练并在边缘进行微调来提高MLLM训练的效率,从而降低能耗和通信成本。我们的实验结果表明,与传统的FL方法相比,所提出的方法显著提高了系统性能,准确率达到92%,降低了30%的通信成本,并且提高了客户端的参与度。这些结果使所提出的方法非常适合大规模的边缘云计算系统。