LLM2D
高达:对齐大型语言模型与图理解
GUNDAM: Aligning Large Language Models with Graph Understanding
作者: Sheng Ouyang, Yulan Hu, Ge Chen, Yong Liu
发布日期: 10/10/2024
arXiv ID: oai:arXiv.org:2409.20053v2

摘要

大型语言模型 (LLM) 在文本数据处理方面取得了令人瞩目的成果,这激发了人们将这些模型应用于文本数据以外领域(例如图数据)的兴趣。在图学习领域,人们越来越关注利用 LLM 来理解和操作图结构数据。现有研究主要集中在具有丰富文本特征的图(例如知识图谱或文本属性图)上,利用 LLM 处理文本的能力,但未能充分解决图结构问题。这项工作特别旨在评估和增强 LLM 理解和利用图数据本身固有结构知识的能力,而不是仅仅关注富含文本内容的图。为此,我们引入了**图理解自然语言驱动分析模型 (GUNDAM)**。该模型使 LLM 能够更好地理解和处理图数据的结构,使其能够通过利用图的结构本身来执行复杂的推理任务。我们在图推理基准上的实验评估不仅证实了 GUNDAM 模型优于最先进的基线,而且揭示了影响 LLM 图推理能力的关键因素。此外,我们还进行了理论分析,说明推理路径如何增强 LLM 的推理能力。