摘要
arXiv:2504.19136v1 宣称类型: cross
摘要:由于模态异质性和光谱互补性的未充分利用,合成孔径雷达(SAR)和RGB图像融合用于土地覆盖分类仍然具有挑战性。现有方法往往无法将共享结构特征与模态特定的辐射属性区分开来,导致特征冲突和信息丢失。为了解决这一问题,我们提出了一种频率感知框架相位-振幅解耦(PAD),该框架在傅里叶域中分离相位(模态共享)和振幅(模态特定)成分。具体而言,PAD 包含两个关键组件:1)相位频谱校正(PSC),通过卷积引导的比例缩放对跨模态相位特征进行对齐,以增强几何一致性;以及 2)振幅频谱融合(ASF),使用频率自适应多层感知机动态整合高频细节和低频结构。该方法利用了SAR对形态特征的敏感性和RGB的光谱丰富性。在WHU-OPT-SAR和DDHR-SK数据集上的广泛实验表明了其先进性能。我们的工作为遥感领域的物理感知多模态融合建立了新范式。代码将在 https://github.com/RanFeng2/PAD 释放。