LLM2D
大型语言模型是对比式推理器
Large Language Models are Contrastive Reasoners
作者: Liang Yao
发布日期: 2/18/2025
arXiv ID: oai:arXiv.org:2403.08211v3

摘要

arXiv:2403.08211v3 宣告类型:替换交叉 摘要:提示方法在增强预训练大型语言模型(LLMs)的能力方面发挥着关键作用。我们探索了对比提示(CP)如何显著提高大型语言模型进行复杂推理的能力。我们通过在LLMs提供答案之前添加“让我们给出一个正确的答案和一个错误的答案。”来展示LLMs作为对比推理者的能力。对各种大型语言模型的实验表明,零样本对比提示在各种算术、常识和符号推理任务中显著提升了标准零样本提示的效果,而无需任何人工设计的少样本示例,例如,使用最先进的GPT-4模型将GSM8K的准确率从35.9%提高到88.8%,AQUA-RAT的准确率从41.3%提高到62.2%。我们的方法在大多数算术和常识推理任务中不仅超越了零样本CoT和少样本CoT,还能无缝集成到现有的提示方法中,与最先进的方法相比,其表现更好或相当。我们的代码可在 https://github.com/yao8839836/cp 获取。