arXiv:2505.06911v1 宣告类型: cross 摘要: 在大数据时代，数据挖掘已成为从庞大而复杂的数据集中发现隐藏模式和见解不可或缺的工具。多模态数据源的集成进一步增强了其潜力。多模态联邦学习（MFL）是一种分布式方法，可以提高多模态学习的效率和质量，确保协作工作和隐私保护。然而，缺失的模态在MFL中构成了重大挑战，通常是由客户端数据质量问题或隐私政策引起的。在本文中，我们提出了MMiC框架，用于在簇内缓解MFL中模态不完整性问题。MMiC在客户端模型中替换部分参数以减轻缺失模态的影响。此外，它利用Banzhaf权力指数优化在这些条件下的客户端选择。最后，MMiC采用了一种创新的方法，通过使用Markowitz组合优化动态控制全局聚合。广泛的实验表明，MMiC在包含缺失模态的多模态数据集上的一般性和个性化性能上始终优于现有的联邦学习架构，证实了我们提出解决方案的有效性。