LLM2D
从问题到见解:探索Stack Overflow问题中报告的XAI挑战
From Questions to Insights: Exploring XAI Challenges Reported on Stack Overflow Questions
作者: Saumendu Roy, Saikat Mondal, Banani Roy, Chanchal Roy
发布日期: 4/21/2025
arXiv ID: oai:arXiv.org:2504.03085v2

摘要

arXiv:2504.03085v2 宣告类型: 替换交叉 摘要:缺乏可解释性是限制AI模型实际应用的主要障碍。已经采用了一些可解释的人工智能(XAI)技术(例如SHAP、LIME)来解释这些模型的性能。然而,用户在实际场景中使用这些技术时常常遇到挑战,因此他们在技术问答论坛(如Stack Overflow)上提交问题以解决这些挑战。我们进行了一项探索性研究,揭示了这些挑战、其严重程度以及可以使得XAI技术更易于使用和更易于获取的特征。我们对此研究的贡献有四个方面。首先,我们手动分析了663个讨论与XAI技术相关的挑战的Stack Overflow问题。我们的仔细调查产生了一份七项挑战的清单(例如,分歧问题)。然后,我们分析了这些问题的普遍性,发现模型集成和分歧问题是最常见的挑战。第二,我们试图通过确定挑战类型与答案元数据(如被接受的答案的存在)之间的相关性来估计每种XAI挑战的严重程度。我们的分析表明,模型集成问题是最严重的挑战。第三,我们基于从业者在其工作中有效使用XAI技术的能力来感知这些挑战的严重程度。从业务人员的回答来看,分歧问题对XAI技术的使用影响最大。第四,我们寻求从业务人员那里获取关于可以使得XAI技术更易于使用和用户友好的改进或功能的共识。大多数人建议解释的一致性和简化集成。我们的研究发现可能会(a)帮助提高XAI的可访问性和易用性,并且(b)作为激励未来研究的初步基准。