摘要
arXiv:2408.14134v3 通告类型: replace-cross
摘要:大型语言模型(LLMs)为增强各种机器学习应用,特别是图神经网络(GNNs),提供了显著的机会。通过利用LLMs中的大量开放世界知识,我们可以更有效地解释和利用文本数据,以更好地表征异ophilic 图,其中相邻节点往往具有不同的标签。然而,现有的异ophilic 图方法未能充分利用与节点相关丰富的文本数据,这可能会揭示出其异ophilic 上下文的更深层次的见解。在本文中,我们探索了LLMs在建模异ophilic 图方面的潜力,并提出了一种新颖的两阶段框架:LLM增强的边鉴别器和LLM引导的边重权。在第一阶段中,我们将LLM微调以更好地根据节点的文本内容识别同ophilic 和异ophilic 边。在第二阶段中,我们根据节点特征、结构以及异ophilic 或同ophilic 特征,自适应地管理GNN中的消息传播。为了应对在实际场景中部署LLMs时的计算需求,我们进一步探讨了模型蒸馏技术来微调更小、更高效的模型,同时保持竞争性性能。广泛的经验实验证明了我们框架的有效性,展示了利用LLMs增强异ophilic 图的节点分类的可能性。