arXiv:2303.03388v3 通告类型: replace-cross 摘要：由于其复杂性，基于图学习的多模态集成和分类是疾病预测中最具挑战性的障碍之一。为了有效地抵消多模态集成过程中模态间的负面影响，并从图中提取异质信息，我们提出了一种名为MMKGL（多模态多核图学习）的新方法。针对模态间负面影响的问题，我们提出了一种多模态图嵌入模块来构建多模态图。不同于传统方法手动为所有模态构建静态图，每个模态通过自适应学习生成单独的图，在多图融合嵌入过程中引入功能图和监督图为优化。随后，我们提出了一种多核图学习模块来从多模态图中提取异质信息。在不同级别的多模态图信息通过具有不同感知场大小的卷积核聚合后，生成一种交叉核发现张量用于疾病预测。我们的方法在基准Autism Brain Imaging Data Exchange (ABIDE) 数据集上进行了评估，并优于现有最先进的方法。此外，我们的模型还识别出了与自闭症相关的具有区分性的脑区，为自闭症病理学的研究提供了指导。