arXiv:2504.09354v1 类别: cross 摘要: 及时准确诊断神经退行性疾病，如阿尔茨海默病，对于疾病的管理至关重要。现有深度学习模型需要大规模标注数据集，通常作为“黑箱”运作。此外，在临床实践中，数据集经常规模较小或未标注，限制了深度学习方法的全部潜力。为此，我们引入了REMEMBER——基于检索的可解释多模态证据引导建模以评估和推理大脑——一种新的机器学习框架，通过基于参考的推理过程，实现利用脑部MRI扫描进行零样本和少量样本阿尔茨海默病诊断。具体而言，REMEMENT 首先使用专家标注的参考数据训练对比对齐的视图-文本模型，并扩展伪文本模态，以编码异常类型、诊断标签和综合临床描述。然后，在推理时，REMEMENT 从编目的数据集中检索相似的人工验证案例，并通过专用的证据编码模块和基于注意力的推理头，整合其上下文信息。这种基于证据的设计使REMEMENT 能够通过将预测根植于检索到的成像和文本上下文中，模仿现实世界的临床决策过程。具体而言，REMEMENT 输出可解释的诊断预测结果，包括参考影像和与临床工作流程对齐的解释说明。实验结果显示，REMEMENT 在零样本和少量样本情况下表现出稳健的预测性能，并提供了一个强大的可解释框架，用于基于神经影像学的诊断，尤其是在数据有限的情况下。