摘要
本文介绍了一种名为“知识表示增强生成”(KRAG) 的新型框架,旨在增强大型语言模型 (LLM) 在特定领域应用中的能力。KRAG 指出在标准数据集中通常缺失的、LLM 本身无法学习的关键知识实体和关系的战略性纳入。在法律应用的背景下,我们提出了 Soft PROLEG,这是 KRAG 下的一个实现模型,它利用推理图来帮助 LLM 提供结构化的法律推理、论证和解释,以满足用户查询。KRAG 的集成,无论是作为独立框架还是与检索增强生成 (RAG) 结合使用,都显著提高了语言模型在法律文本和术语方面应对复杂挑战的能力。本文详细介绍了 KRAG 的方法论、通过 Soft PROLEG 的实现以及潜在的更广泛的应用,强调了它在推进自然语言理解和处理专业知识领域中的重要作用。