arXiv:2411.14684v2 更新类型: 替换-跨境 摘要: 多模态 MRI 成像合成旨在通过有效融合和映射来自可用 MRI 模态的子集来生成缺失模态的图像。大多数现有方法采用图像到图像的翻译范式，将多种模态视为输入通道。然而，这些方法往往由于在不同模态之间实现精确的特征级或语义级对齐的固有难度而产生次优结果。为了解决这些问题，我们提出了一种适应性组间交互网络 (AGI-Net)，该网络明确建模了多模态 MRI 成像合成中的跨模态和模内关系。具体而言，在特征通道首先按预定义的组进行分割之后，我们应用了适应性滚动机制到传统卷积核上，以更好地捕捉不同模态间的特征和语义对应关系。同时，我们引入了一个跨组注意力模块以实现不同组间的有效特征融合，从而增强网络的表示能力。我们在公开可用的 IXI 和 BraTS2023 数据集上验证了提出的 AGI-Net。实验结果表明，AGI-Net 在多模态 MRI 成像合成任务中达到了最先进的性能，证实了其模态感知交互设计的有效性。我们在以下链接发布了相关代码：https://github.com/zunzhumu/Adaptive-Group-wise-Interaction-Network-for-Multimodal-MRI-Synthesis.git。