arXiv:2408.13457v3 宣布类型: 替换-交叉 摘要：自我一致性（SC），一种广泛使用的链式推理解码策略，在各种多步推理任务中表现出显著的提升，但却由于多次采样的预定大小而带来高昂的成本。它的变种，自适应自我一致性（ASC）和早期停止自我一致性（ESC），根据一组预采样的后验分布动态调整采样数量，从而在最小影响性能的情况下减少了SC的成本。然而，这两种方法并没有利用关于问题难度的先验信息。这通常会导致对于容易回答的问题进行不必要的重复采样，因为这些问题单次尝试就能准确回答，从而浪费资源。为了应对这一问题，我们提出了一种难度自适应自我一致性（DSC），该方法从先验和后验的角度利用批查询的难度信息，以自适应地分配推理资源，进一步减少SC的整体成本。为了证明DSC的有效性，我们在三个流行的推理任务类别上进行了广泛实验：算术、常识和符号推理，在六个基准上展示了实验结果。实证结果表明，与强大的基线ASC和ESC相比，DSC在成本上显著超越它们，同时在性能上保持可比性。