摘要
arXiv:2502.01684v1 类型: cross
摘要: 图表示学习已经成为了节点分类和链路预测等任务的基石,但现有的自我监督学习(SSL)方法面临着计算效率低下、依赖对比目标、表示崩溃等挑战。现有方法往往依赖于特征重建、负样本采样或复杂的解码器,这引入了训练负担并阻碍了泛化能力。此外,当前解决这些限制的技术未能考虑到节点嵌入在没有标记节点的情况下对特定预测的贡献。为了应对这些限制,我们提出了一种新型的联合嵌入预测框架,用于图SSL,该框架去除了对比目标和负样本采样,同时保留了语义和结构信息。此外,我们引入了一个意识语义的目标项,该项结合了从高斯混合模型(GMMs)中获得的伪标签,通过评估潜在特征的贡献增强节点的可区分性。广泛的实验表明,我们的框架在基准测试中优于现有的图SSL方法,实现了更高的性能,而无需对比损失或复杂的解码器。关键创新包括:(1) 一种非对比、视图不变的联合嵌入预测架构;(2) 利用子图之间的单一上下文和多个目标关系;(3) 以高斯混合模型(GMM)为基础的伪标签评分,以捕捉语义贡献。该工作通过提供一种计算高效、抗表示崩溃的范式,将图SSL推进了一步,该范式结合了空间和语义图特征以支持下游任务。我们的论文代码可以在 https://github.com/Deceptrax123/JPEB-GSSL 找到。