LLM2D
基于无缝邻近性整合的平滑图对比学习
Smoothed Graph Contrastive Learning via Seamless Proximity Integration
作者: Maysam Behmanesh, Maks Ovsjanikov
发布日期: 11/27/2024
arXiv ID: oai:arXiv.org:2402.15270v2

摘要

图对比学习 (GCL) 通过将节点对分类为正样本和负样本(使用通常依赖于在两个增强图中建立对应关系的选择过程)来对齐节点表示。传统的 GCL 方法在对比损失中统一地结合负样本,导致对负节点的处理相同,而不管它们与真实正样本的接近程度如何。在本文中,我们提出了一种平滑图对比学习模型 (SGCL),它利用增强图的几何结构,在对比损失中注入与正/负样本对相关的邻近信息,从而显著地规范化学习过程。所提出的 SGCL 通过结合三种不同的平滑技术来调整对比损失中与节点对相关的惩罚,从而产生邻近感知的正样本和负样本。为了增强大型图的可扩展性,所提出的框架结合了一种图批量生成策略,该策略将给定的图划分为多个子图,从而促进在单独的批次中进行有效的训练。通过在各种基准(特别是大型基准)上进行广泛的无监督设置实验,我们证明了我们提出的框架优于最新的基线方法。