LLM2D
促进对大型语言模型适当依赖的作用:解释、来源和矛盾的作用
Fostering Appropriate Reliance on Large Language Models: The Role of Explanations, Sources, and Inconsistencies
作者: Sunnie S. Y. Kim, Jennifer Wortman Vaughan, Q. Vera Liao, Tania Lombrozo, Olga Russakovsky
发布日期: 2/13/2025
arXiv ID: oai:arXiv.org:2502.08554v1

摘要

arXiv:2502.08554v1 类型: cross 摘要: 大型语言模型(LLMs)可以生成听起来流畅且令人信服的错误响应,这增加了用户将这些响应视为正确的风险。减轻这种过度依赖是一个关键挑战。通过让参与者使用包含LLM的应用程序回答客观问题的口头表达研究,我们识别了几个影响用户依赖性的LLM响应特征:解释(答案的支持细节)、解释中的不一致性和来源。通过一项大规模、预先注册且受控的实验(N=308),我们隔离并研究了这些特征对用户依赖性、准确性及其他指标的影响。我们发现,存在解释会增加用户对正确和错误响应的依赖性。然而,当我们提供来源或解释表现出不一致时,用户对错误响应的依赖性较少。我们讨论了这些发现对促进适当依赖LLMs的影响。