摘要
对比学习已成为自监督视觉表征学习的主流方法。难负样本(与锚点样本高度相似)是增强学习表征判别能力的关键。然而,有效利用难负样本仍然是一个挑战。我们提出了 SynCo(对比学习中的合成负样本),一种通过在表征空间生成合成难负样本来提高模型性能的新方法。SynCo 基于 MoCo 框架,引入了六种策略,以最小的计算开销动态创建多样化的合成难负样本。SynCo 实现了更快的训练和更好的表征学习,在 200 个预训练 epoch 后 ImageNet ILSVRC-201 线性评估中获得了 67.9% 的 top-1 准确率,超过了使用相同 ResNet-50 编码器的 MoCo 的 67.5%。它还更有效地转移到检测任务:在 PASCAL VOC 上,它以 82.6% 的 AP 超过了监督基线和 MoCo;在 COCO 上,它在边界框检测中以 41.0% 的 AP 和实例分割中以 35.7% 的 AP 设定了新的基准。我们的合成难负样本生成方法显着增强了通过自监督对比学习学习到的视觉表征。代码可在 https://github.com/giakoumoglou/synco 获取。