arXiv:2408.03618v4 宣布类型: 替换-交叉 摘要：尽管大型语言模型（LLMs）在自然语言处理任务中表现出色，但它们仍然难以生成逻辑上的合理论据，从而导致传播虚假信息等潜在风险。为了解决这一问题，我们引入了FIPO，这是一种基于谬误信息的框架，通过利用偏好优化方法引导LLMs生成逻辑上的合理论据。FIPO 包括一个分类损失，用于捕捉谬误类型的细微信息。我们在论据数据集上的结果表明，我们的方法将谬误错误降低了高达17.5%。此外，我们的测评结果显示，我们方法生成的论据质量显著优于微调基线以及其他的偏好优化方法，如DPO。这些发现强调了确保模型对逻辑谬误有所认识对于有效论据生成的重要性。我们的代码可在 github.com/lucamouchel/Logical-Fallacies 获取。