摘要
arXiv:2504.04827v1 交叉类型
摘要:检测深伪内容已成为一个越来越重要的课题,特别是在人工智能生成技术迅速发展的背景下。本文中,我们提出的问题是:我们如何构建一个对大多数面部深伪内容都有效的通用检测框架?一个显著的挑战是可用的深伪生成器种类繁多,导致伪造痕迹各不相同(例如,光照不一致、色彩不符等)。但我们是否应该“教导”检测器分别学习所有这些痕迹?不可能也不切实际地逐一解释它们。因此,核心思想是集中发现不同深伪内容中更为常见且通用的痕迹。据此,我们将深伪痕迹分为两类截然不同但互补的类型:面部不一致性痕迹(FIA)和上采样痕迹(USA)。FIA 产生于生成所有复杂细节的挑战,不可避免地导致面部复杂特征与相对统一的背景区域之间的一致性问题。USA 另一方面则是生成器解码器在上采样过程中不可避免留下的痕迹。这一分类源于观察到所有现有的深伪内容通常都表现出一种或两种这些痕迹中的至少一种。为了实现这一目标,我们提出了一种新的伪假数据级别创建框架,该框架仅使用 FIA 和 USA 构建假样本,而不引入额外的非通用痕迹。具体来说,我们利用超分辨率模拟 USA,设计了一个 Blender 模块,在多样化的面部区域使用图像级别的自我混合来生成 FIA。我们惊讶地发现,使用这种直观的设计,仅使用我们伪假数据训练的标准图像分类器能够非平凡地泛化到未见过的深伪内容。