摘要
大型语言模型在生成响应时经常面临错误或“幻觉”的挑战,特别是在复杂的推理任务中。为了缓解这个问题,我们提出了一种检索增强推理方法 FiDeLiS,该方法通过将响应锚定到结构化、可验证的推理路径来增强知识图问答。FiDeLiS 使用了一种关键词增强检索机制,从 KG 的向量索引中获取相关实体和关系,以确保高召回率检索。一旦检索到这些实体和关系,我们的方法就会构建候选推理路径,然后使用逐步束搜索对其进行细化。这确保了我们创建的所有路径都可以自信地链接回 KG,确保它们是准确可靠的。我们方法的一个独特特征是它将自然语言规划与束搜索相结合,以优化推理路径的选择。此外,我们重新设计了推理路径评分的方式,将此过程转变为演绎推理任务,使 LLM 能够通过演绎推理而不是传统的 logits 评分来评估路径的有效性。这有助于避免误导性的推理链,并减少不必要的计算需求。大量的实验表明,我们的方法,即使作为一种无训练方法,具有较低的计算成本和更高的通用性,在三个数据集上也优于已建立的强大基线。