LLM2D
不要被误导:人机协作中解释的错误信息效应
Don't be Fooled: The Misinformation Effect of Explanations in Human-AI Collaboration
发布日期: 9/20/2024
arXiv ID: oai:arXiv.org:2409.12809v1

摘要

arXiv:2409.12809v1 公告类型: 交叉 摘要: 在各种应用中,人类越来越多地使用黑箱人工智能(AI)系统,而无法洞察这些系统的推理过程。为了应对这种不透明性,可解释AI(XAI)方法承诺提高透明度和可解释性。尽管最近的研究探讨了XAI如何影响人机协作,但很少有研究考察错误解释可能带来的潜在陷阱。这对人类的影响可能是深远的,但尚未得到广泛探讨。为了研究这一点,我们进行了一项研究(n=160),探讨了在AI辅助决策中,人类在XAI支持下的表现。我们的研究结果揭示了当错误的解释伴随正确的AI建议时,会产生误导效应,这种效应在协作后具有深远的影响。这种效应导致人类推断出错误的推理策略,阻碍任务执行并表现出受损的程序性知识。此外,错误的解释在协作过程中损害了人机团队的表现。通过我们的工作,我们为HCI领域提供了实证证据,证明了错误解释对人类协作后产生的负面影响,并为AI设计者提供了指导原则。