LLM2D
基于多粒度 Attention 的异质超图神经网络
Multi-Granular Attention based Heterogeneous Hypergraph Neural Network
作者: Hong Jin, Kaicheng Zhou, Jie Yin, Lan You, Zhifeng Zhou
发布日期: 5/8/2025
arXiv ID: oai:arXiv.org:2505.04340v1

摘要

arXiv:2505.04340v1 交叉类型:HeteGNN 摘要:异构图神经网络(HeteGNNs)通过有效地从异构图中抽取复杂的结构和语义信息,展示了强大的节点表示学习能力。目前大多数领先的HeteGNNs遵循邻域聚合范式,通过基于元路径的消息传递学习潜在的节点表示。然而,由于元路径的成对性质,这些模型无法捕捉节点之间的高阶关系,导致性能不佳。此外,HeteGNNs中长距离消息传递导致的“过度压缩”问题进一步限制了这些模型的效果,“过度压缩”是指长距离消息传递导致严重的信息失真。为了解决这些局限性,本文提出了MGA-HHN,一种基于多粒度注意力的异构超图神经网络,用于异构图表示学习。MGA-HHN 引入了两项关键创新:(1)一种新颖的基于元路径的异构超图构建方法,通过多个视角明确建模异构图中的高阶语义信息,(2)一种在节点和超边两个层面运行的多粒度注意力机制。该机制使得模型能够捕捉同一超边类型内部共享相同语义背景的节点之间的细粒度交互,同时保持不同超边类型中语义的多样性。因此,MGA-HHN 有效地缓解了长距离消息失真,并生成了更具表现力的节点表示。在现实世界的基准数据集上的广泛实验表明,MGA-HHN 在节点分类、节点聚类和可视化任务中优于现有最先进的模型,展示了其在这些任务中的有效性。