摘要
arXiv:2504.01429v1 类型: 交叉
摘要:大型语言模型(LLMs)与图神经网络(GNNs)的结合 recently 被探索用于增强文本属性图(TAGs)的功能。大多数现有方法将图结构的文本描述或邻接节点的文本直接输入到LLMs中。然而,这些方法往往会使得LLMs简单地将结构信息视为一般的上下文文本,从而限制了它们在图相关任务中的有效性。在本文中,我们引入了LanSAGNN(语言语义各向异性图神经网络)框架,将各向异性GNN的概念扩展到自然语言层面。该模型利用LLMs提取为节点对量身定制的语义信息,有效地捕捉了节点关系中的独特交互。此外,我们提出了一种高效的双层LLMs微调架构,以更好地将LLMs的输出与图任务对齐。实验结果表明,LanSAGNN在不增加复杂性的情况下显著增强了现有的基于LLMs的方法,同时显示了强大的抗干扰能力。