LLM2D
多领域图基础模型:通过拓扑对齐实现稳健的知识迁移
Multi-Domain Graph Foundation Models: Robust Knowledge Transfer via Topology Alignment
作者: Shuo Wang, Bokui Wang, Zhixiang Shen, Boyan Deng, Zhao Kang
发布日期: 2/5/2025
arXiv ID: 2502.02017

摘要

arXiv:2502.02017v1 交叉公告类型:图形 摘要:近期在计算机视觉(CV)和自然语言处理(NLP)方面的进展激励着研究人员通过跨领域预训练开发通用图形基础模型。然而,不同领域之间的图形拓扑差异构成了一个基本挑战。此外,现实中的图形往往是稀疏的,并且容易受到噪声连接和对抗攻击的影响。为了解决这些问题,我们提出了多领域图形基础模型(MDGFM),这是一种统一框架,通过对齐和利用跨领域的拓扑信息来促进稳健的知识迁移。MDGFM通过适应性地平衡特征和拓扑结构,同时对原始图形进行改进,以消除噪声和对齐拓扑结构,来跨越不同的领域。为了进一步增强知识迁移,我们引入了一种有效的提示调优方法。通过对齐拓扑结构,MDGFM不仅改善了跨领域的预训练,还使知识迁移能够在未见领域中稳健进行。理论分析提供了MDGFM有效性和领域泛化能力的保证。在同质性和异质性图形数据集上的广泛实验验证了我们方法的稳健性和有效性。