LLM2D
多模态土地覆盖分类的相位-幅度解耦融合
PAD: Phase-Amplitude Decoupling Fusion for Multi-Modal Land Cover Classification
作者: Huiling Zheng, Xian Zhong, Bin Liu, Yi Xiao, Bihan Wen, Xiaofeng Li
发布日期: 4/29/2025
arXiv ID: oai:arXiv.org:2504.19136v1

摘要

arXiv:2504.19136v1 宣称类型: cross 摘要:由于模态异质性和光谱互补性的未充分利用,合成孔径雷达(SAR)和RGB图像融合用于土地覆盖分类仍然具有挑战性。现有方法往往无法将共享结构特征与模态特定的辐射属性区分开来,导致特征冲突和信息丢失。为了解决这一问题,我们提出了一种频率感知框架相位-振幅解耦(PAD),该框架在傅里叶域中分离相位(模态共享)和振幅(模态特定)成分。具体而言,PAD 包含两个关键组件:1)相位频谱校正(PSC),通过卷积引导的比例缩放对跨模态相位特征进行对齐,以增强几何一致性;以及 2)振幅频谱融合(ASF),使用频率自适应多层感知机动态整合高频细节和低频结构。该方法利用了SAR对形态特征的敏感性和RGB的光谱丰富性。在WHU-OPT-SAR和DDHR-SK数据集上的广泛实验表明了其先进性能。我们的工作为遥感领域的物理感知多模态融合建立了新范式。代码将在 https://github.com/RanFeng2/PAD 释放。