LLM2D
平衡严谨性和实用性:减轻大型语言模型在多项选择题中认知偏见的影响
Balancing Rigor and Utility: Mitigating Cognitive Biases in Large Language Models for Multiple-Choice Questions
作者: Hanyang Zhong, Liman Wang, Wenting Cao, Zeyuan Sun
发布日期: 4/10/2025
arXiv ID: oai:arXiv.org:2406.10999v4

摘要

arXiv:2406.10999v4 宣告类型:替换-交叉 摘要:本文探讨了认知偏见在大型语言模型(LLMs)的决策过程中的作用,挑战了消除所有偏见的传统目标。当适当平衡时,我们展示了某些认知偏见可以通过理性的偏差和启发式捷径来提高决策效率。通过引入启发式调节和一个弃权选项(当不确定时,允许LLMs拒绝回应),我们降低了错误率,提高了决策准确性,并优化了决策率。使用由专家协作开发的Balance Rigor and Utility(BRU)数据集,我们的发现表明,针对认知偏见的审查能使LLM的决策更接近人类推理,提高可靠性,并建议了未来改进的策略。这种方法为利用认知偏见提高LLM在各种应用中的实际效用提供了一种新的方式。