arXiv:2409.12385v1 公告类型: 交叉 摘要: 当今许多现实应用，如视频监控和城市治理，需要解决戴口罩人脸的识别问题，其中多样化的口罩内容替换常常导致外观不完整和表示模糊，从而显著降低识别准确率。受近期非模态感知进展的启发，我们提出将非模态完成机制迁移到戴口罩人脸识别任务中，采用端到端的去遮挡蒸馏框架，该框架包含两个模块。去遮挡模块应用生成对抗网络进行人脸补全，恢复口罩下的内容并消除外观模糊。蒸馏模块采用预训练的通用人脸识别模型作为教师，并通过大量在线合成人脸对，将教师的知识传递给学生模型，用于补全人脸的训练。特别地，教师知识以多个阶次实例间的结构关系表示，作为后验正则化以实现适应性。通过这种方式，知识可以充分蒸馏并传递以识别戴口罩人脸。在合成和真实数据集上的实验证明了所提出方法的有效性。