LLM2D
DeCAP:面向去偏见的零样本问答大型语言模型上下文自适应提示生成
DeCAP: Context-Adaptive Prompt Generation for Debiasing Zero-shot Question Answering in Large Language Models
作者: Suyoung Bae, YunSeok Choi, Jee-Hyong Lee
发布日期: 3/26/2025
arXiv ID: oai:arXiv.org:2503.19426v1

摘要

arXiv:2503.19426v1 声明类型: cross 摘要:尽管大型语言模型(LLMs)在零样本问答(QA)方面表现出色,但在面对社会敏感问题时,它们往往会暴露其内部知识中存在的偏见,导致性能下降。现有的零样本方法效率高,但未能考虑上下文,从而无法防止偏见在答案中的传播。为了解决这个问题,我们提出了DeCAP,一种使用上下文自适应提示生成进行LLMs去偏的方法。DeCAP 利用问题含糊性检测,根据上下文采取适当的去偏措施,并利用中立答案指导生成抑制LLMs对上下文进行客观判断,从而最小化其内部知识中偏见的传播。我们在八种不同LLMs的各种实验中显示,DeCAP 达到了最先进的零样本去偏问答性能。这表明DeCAP 在提高LLMs在各种问答设置中的公平性和准确性方面具有有效性。