LLM2D
链条former:从链条视角进行知识图谱上的数值推理
CHAINSFORMER: Numerical Reasoning on Knowledge Graphs from a Chain Perspective
作者: Ze Zhao, Bin Lu, Xiaoying Gan, Gu Tang, Luoyi Fu, Xinbing Wang
发布日期: 4/22/2025
arXiv ID: oai:arXiv.org:2504.14282v1

摘要

arXiv:2504.14282v1 通知类型: 新 摘要:在知识图谱(KGs)上进行推理在知识图谱完成或问答系统中发挥着至关重要的作用,提供更加丰富和准确的三元组和属性。随着数值属性在描述KG中的实体和关系方面变得越来越重要,对这些属性进行推理的能力变得尤为重要。现有的基于图的方法,如图神经网络(GNNs)和知识图嵌入(KGEs),主要侧重于聚合同质的局部邻域并且隐式的嵌入各种三元组。然而,这些方法往往无法充分利用图中逻辑路径的潜力,限制了它们在利用推理过程中的有效性。为了解决这些限制,我们提出了一种名为ChainsFormer的新型基于链的框架,以支持数值推理。Chainsformer不仅显式地构建逻辑链,还扩展了推理深度到多跳。特别地,我们引入了关系-属性链(RA-Chains)这种专门的逻辑链,以建模序列推理模式。ChainsFormer通过采用顺序的上下文学习机制,捕捉沿着RA-Chains进行多跳推理的逐步性质。为了缓解噪声链的影响,我们提出了一种超球面亲和评分机制,能够在可变分辨率空间中选择相关的逻辑链。此外,ChainsFormer整合了一种基于注意力的数值推理器,以识别关键的推理路径,从而增强推理的准确性和透明度。实验结果表明,ChainsFormer显著优于现有最佳方法,在性能上提高了高达20.0%。代码实现可在https://github.com/zhaodazhuang2333/ChainsFormer上获得。