LLM2D
跨分支正交性以提高面部深伪检测的泛化能力
Cross-Branch Orthogonality for Improved Generalization in Face Deepfake Detection
作者: Tharindu Fernando, Clinton Fookes, Sridha Sridharan, Simon Denman
发布日期: 5/9/2025
arXiv ID: oai:arXiv.org:2505.04888v1

摘要

arXiv:2505.04888v1 交叉类型 摘要:生成AI技术的显著进步催生了一系列前所未有的真实度深伪类别,这使得深伪内容日益成为执法机构和普通公众的困扰。特别是我们注意到,由于面部深伪内容引起的多媒体内容混乱、欺诈和信心丧失的现象引起了人们的关注,现有的深伪检测器难以跟上生成深伪技术快速进步的节奏。这主要是因为它们依赖特定的伪造特征,限制了它们的泛化能力和检测新型深伪类型的能力。为应对恶意面部深伪内容的传播,本文提出了一种新策略,该策略结合了粗到细的空间信息、语义信息及其交互,同时确保特征的独特性和降低模型特征的冗余。提出了一种基于特征正交性的分离策略,确保分支级和跨分支特征的分离,这允许我们在不影响特征空间的复杂性和保持泛化的情况下整合多个特征向量。在三个公开基准数据集:FaceForensics++、Celeb-DF 和 Deepfake Detection Challenge (DFDC) 上进行全面实验表明,在跨数据集评估设置中,这些设计选择使提出的方法在 Celeb-DF 数据集上比当前最佳方法高出 5%,在 DFDC 数据集上高出 7%。