LLM2D
平衡严谨性和实用性:减轻大型语言模型在多项选择题中认知偏差的影响
Balancing Rigor and Utility: Mitigating Cognitive Biases in Large Language Models for Multiple-Choice Questions
作者: Hanyang Zhong, Liman Wang, Wenting Cao, Zeyuan Sun
发布日期: 4/15/2025
arXiv ID: oai:arXiv.org:2406.10999v5

摘要

arXiv:2406.10999v5 通知类型: 替换-交叉 摘要:本文探讨了认知偏见在大型语言模型(LLMs)决策过程中的作用,挑战了消除所有偏见的传统目标。当适当平衡时,我们表明某些认知偏见可以通过理性的偏差和启发式捷径来提升决策效率。通过引入启发式调节和退出选项(允许LLMs在不确定时不出回应),我们降低了错误率,提高了决策准确性,并优化了决策速度。利用通过专家合作开发的平衡严谨性和实用性(BRU)数据集,我们的研究结果表明,有针对性地检查认知偏见能够使LLM的决策与人类推理更一致,从而增强可靠性,并建议未来改进的策略。这种方法为利用认知偏见提升LLM在各种应用中的实际效用提供了新的途径。