arXiv:2207.14000v4 通知类型: replace-cross 摘要：将深度学习与符号逻辑推理相结合旨在充分利用两个领域各自的成功，并且已经引起了越来越多的关注。受 DeepLogic 的启发，一个端到端模型被训练用于在逻辑程序上进行推理，我们介绍了 IMA-GloVe-GA，这是一种用于多步自然语言表达推理的迭代神经推理网络。在我们的模型中，推理是基于具有门控注意力机制的 RNN 的迭代记忆神经网络进行的。我们在三个数据集上评估了 IMA-GloVe-GA：PARARULES、CONCEPTRULES V1 和 CONCEPTRULES V2。实验结果表明，带有门控注意力机制的 DeepLogic 的测试准确性高于 DeepLogic 及其他 RNN 基准模型。我们的模型在规则被打乱的情况下，比 RoBERTa-Large 在分布外泛化方面表现更好。此外，为了解决当前多步推理数据集中推理深度分布不平衡的问题，我们开发了 PARARULE-Plus，一个包含更多需要更深推理步骤的示例的大数据集。实验结果表明，添加 PARARULE-Plus 可以提高模型在需要更深推理步骤的示例上的性能。源代码和数据可在 https://github.com/Strong-AI-Lab/Multi-Step-Deductive-Reasoning-Over-Natural-Language 获取。