arXiv:2502.14001v1 宣告类型: cross 摘要: 近期机器学习算法的发展达到了一个程度，使得医疗设备能够配备人工智能（AI）模型，用于临床环境中的诊断支持和常规自动化。在医学和医疗保健领域，AI模型产生的结果的充分且客观的解释性需求尤为突出。然而，由于其复杂性，AI模型通常被视为黑盒模型，导致其响应的计算过程往往是不透明的。尽管已经提出了一些方法通过评估各特征在分类和预测中的重要性来解释模型的行为，但这些方法可能会因用于训练或测试的数据集的规模和取样协议产生的偏差和不透明性而受到影响。为了克服现有方法的局限性，我们探索了一种替代方法，以提供AI模型的客观解释，这种解释独立于学习过程，并不需要额外的数据。作为这一研究方向的初步研究，本文考察了一种基于数值计算的深度学习模型雅可比矩阵的可用性，该矩阵衡量了在输入中添加小扰动时模型响应的稳定性。如果有可用的指标，则从给定的目标输入训练的AI模型中计算出该指标。这是基于扰动的解释的第一步，将有助于医疗从业者理解并解释AI模型在临床应用中的响应。