摘要
arXiv:2503.20294v1 型别:交叉学科
摘要:恶意图像篡改带来了社会风险,增加了有效图像篡改检测方法的重要性。近年来,在图像篡改检测方面的进展主要依靠完全监督的方法,这些方法需要耗费大量劳动力的像素级注释。因此,探索仅需图像级别二进制标签即可进行训练的弱监督图像篡改定位方法是至关重要的。然而,现有的弱监督图像篡改方法忽略了边信息对于准确定位的重要性,导致定位性能不佳。为解决这一问题,我们提出了一种上下文感知边界定位(CABL)模块,以聚合边界特征并学习上下文不一致性,以便定位篡改区域。此外,通过利用类激活映射(CAM)和分割万物模型(SAM),我们引入了CAM引导的SAM细化(CGSR)模块,以生成更准确的篡改定位图。通过结合两个模块,我们基于双分支Transformer-CNN架构提出了一种新颖的弱监督框架。我们的方法在多个数据集上实现了卓越的定位性能。