arXiv:2505.01390v1 交叉类型: cross 摘要：本研究提出了一种新颖的方法，结合多模态深度学习与固有可解释人工智能技术，以预测接受新辅助治疗的非小细胞肺癌患者在治疗过程中的病理反应。由于现有影像组学和单一模态深度学习方法的局限性，我们引入了一种中间融合策略，将成像数据和临床数据结合起来，使得数据模态之间的交互更加高效。所提出的多模态Doctor-in-the-Loop方法进一步增强了临床相关性，通过直接将临床医生的专业知识嵌入训练过程，逐步引导模型的注意力从广泛的肺部区域转移到特定的病灶。结果显示，这种方法提高了预测准确性和可解释性，提供了在临床应用中优化数据集成策略的见解。