摘要
arXiv:2502.13562v1 Announce Type: cross
摘要:大规模语言模型(LLMs)在一系列任务中展现了卓越的上下文内推理能力,特别是在处理语言或图像等非结构化输入方面。然而,由于LLMs对非欧几里得结构的理解有限,它们在处理结构化数据(如图)方面存在困难。因此,在经过额外的微调之前,它们在图学习任务中的表现明显落后于图神经网络(GNNs)。在本文中,我们展示了图数据上的学习可以被概念化为检索增强生成(RAG)过程,在这种过程中,特定实例(例如节点或边)作为查询,而图本身作为检索到的上下文。基于这一见解,我们提出了一系列RAG框架,以增强LLMs在图学习任务中的上下文内学习能力。综合评估表明,我们提出的RAG框架显著提高了LLMs在图基任务上的性能,特别是在必须使用未经修改的预训练LLM或通过API访问的情况下。