arXiv:2502.12180v1 共用类型: cross 摘要：多模态联邦学习（MFL）已成为在分布式客户端之间协作训练多模态模型的一种有前景的方法，特别是在医疗保健领域。在脑成像分析的背景下，模态不完备性提出了一项重大挑战，其中一些机构可能因隐私问题、设备限制或数据可用性问题而缺乏特定成像模态（例如PET、MRI或CT）。虽然现有工作的常见假设是模态完备性，或者过于简化模态缺失的情况，但在这项研究中，我们通过同时考虑客户端级别和实例级别的模态不完备性，模拟了一个更现实的场景。在此现实模拟的基础上，我们提出了ClusMFL，这是一种利用特征聚类的新型MFL框架，用于在模态不完备性条件下进行跨机构脑成像分析。具体而言，ClusMFL利用FINCH算法为每对模态-标签构建聚类中心池，有效地捕捉了细微的数据分布。这些聚类中心随后用于在每个模态内部通过监督对比学习进行特征对齐，并作为缺失模态的代理，允许跨模态知识迁移。此外，ClusMFL采用一种模态感知的聚合策略，进一步增强了在严重模态不完备情况下的模型性能。我们在ADNI数据集上评估了所提出的方法，利用结构MRI和PET扫描。广泛的实验结果表明，ClusMFL在不同程度的模态不完备情况下优于各种基准方法，提供了跨机构脑成像分析的可扩展解决方案。