LLM2D
基于RGB-事件的视觉目标跟踪的对抗攻击
Adversarial Attack for RGB-Event based Visual Object Tracking
作者: Qiang Chen, Xiao Wang, Haowen Wang, Bo Jiang, Lin Zhu, Dawei Zhang, Yonghong Tian, Jin Tang
发布日期: 4/22/2025
arXiv ID: oai:arXiv.org:2504.14423v1

摘要

arXiv:2504.14423v1 跨模态对抗攻击类型:交叉 摘要:视觉物体跟踪是计算机视觉和多模态融合领域的关键研究课题。在各种方法中,结合RGB帧和事件流的鲁棒视觉跟踪引起了研究人员的广泛关注。在追求高准确性和效率的同时,探索RGB-事件流跟踪算法的有效对抗攻击和防御方法也很重要,但该领域的研究相对较少。为填补这一空白,本文提出了一种针对RGB-事件流视觉跟踪的跨模态对抗攻击算法。由于事件流具有多种表示形式,且事件体和帧更为常用,本文将重点研究这两种表示形式的深度研究。具体而言,对于RGB-事件体,我们首先通过对抗损失优化扰动,生成RGB帧对抗样本。对于离散事件体表示,我们提出了一种两步攻击策略,首先,在目标区域注入事件体作为初始对抗样本,然后,通过扰动事件体的空间位置进行梯度引导优化。对于基于RGB-事件帧的跟踪,我们通过整合多模态数据的梯度信息来优化跨模态的通用扰动。我们使用三个广泛使用的RGB-事件流跟踪数据集,即COESOT、FE108和VisEvent,对提出的算法进行了评估。大量实验表明,我们的方法在多种数据集(无论是单模态还是多模态场景)中显著降低了跟踪器的性能。源代码将发布在https://github.com/Event-AHU/Adversarial_Attack_Defense