arXiv:2505.04956v1 声称类型: cross 摘要: 扩散概率模型（DPMs）因其生成高质量样本的潜力而广为人知，但在表示学习中的应用却常常被忽略。尽管最近的研究突显了它们在捕捉视觉语义方面的潜力，但将DPMs应用于图表示学习仍处于起步阶段。在本文中，我们介绍了Graffe，这是一种为图表示学习设计的自监督扩散模型。它包含一个图编码器，该编码器将源图压缩成一个紧凑表示，该表示随后作为条件以指导去噪解码器的去噪过程。为了评估我们模型的有效性，我们首先探讨了将扩散模型应用于表示学习的理论基础，证明了去噪目标隐含地最大化了数据与其表示之间的条件互信息。具体而言，我们证明了去噪分数匹配损失的负对数是一个可行的下界，用于条件互信息。实验上，我们进行了一系列案例研究以验证我们的理论洞察。此外，在结点分类和图分类任务的线性探针设置下，Graffe 展示了竞争力的结果，并在11个真实数据集中有9个实现了领先性能。这些发现表明，强大的生成模型，尤其是扩散模型，是图表示学习的有效工具。