LLM2D
prompt驱动的持续图学习
Prompt-Driven Continual Graph Learning
作者: Qi Wang, Tianfei Zhou, Ye Yuan, Rui Mao
发布日期: 2/11/2025
arXiv ID: oai:arXiv.org:2502.06327v1

摘要

arXiv:2502.06327v1 安装类型:跨领域 摘要:持续图学习(CGL),其目标是通过不断进化的图数据来适应新任务,同时不忘之前的知识,受到了科研界的广泛关注。主流解决方案采用基于记忆回放的想法,即缓存以前任务中的代表性数据,以便重新训练图模型。然而,这种方法在不断进化的图数据上面临可扩展性问题,并引发了数据隐私方面的担忧。受最近基于提示学习范式进展的启发,本文引入了一种新颖的基于提示的持续图学习(PROMPTCGL)框架,该框架为每个新到来的任务学习一个单独的提示,并保持底层图神经网络模型固定。这样,PROMPTCGL 自然地避免了之前任务知识的重大遗忘。更具体地说,我们提出了分层提示策略,从特征级和拓扑级指导模型,以全面应对动态持续学习中任务图的变化。此外,我们开发了一个个性化提示生成器,在生成每个图节点的定制提示的同时,尽可能减少所需提示的数量,从而保持恒定的内存消耗,不论图的规模大小。在四个基准上的广泛实验表明,PROMPTCGL 达到了现有 CGL 方法的优越性能,同时显著降低了内存消耗。我们的代码可在 https://github.com/QiWang98/PromptCGL 获取。