摘要
arXiv:2407.00936v5 通告类型: 替换-交叉
摘要:知识表示学习(KRL)对于通过将知识图谱(KGs)中的知识事实投影到向量空间中,从而使符号知识能够应用于下游任务至关重要。尽管KRL方法在建模KG结构信息方面表现出色,但它们正受到 KG 稀疏性的困扰。基于 Transformer 架构构建的大语言模型(LLMs)的兴起为通过整合文本信息来增强 KRL 并解决 KG 中的信息稀疏性提供了令人鼓舞的机会。增强的 KRL 方法包括三种关键方法:利用详细上下文信息的编码器方法、利用统一的Seq2Seq模型进行全面编码和解码的编码器-解码器方法,以及利用大量语料库中的丰富知识的解码器方法,这些方法在解决各种下游任务中的 KRL 的有效性与泛化能力方面取得了显著进步。本文提供了一个广泛的下游任务概览,并同时指出了这些不断发展的领域中的新兴研究方向。