摘要
深度学习能够从超声心动图序列中自动提取心功能描述符,如射血分数或应变。这些描述符提供了细粒度的信息,医生会结合临床记录中的更全局变量来评估患者的状况。借鉴应用于表格数据的最新Transformer模型,我们提出了一种方法,该方法考虑从医疗记录和超声心动图中提取的所有描述符,以学习一个难以表征连续体的血管病理学的表示,即高血压。我们的方法首先使用特定于模态的方法将每个变量投影到其自身的表示空间中。然后将这些标准化的多模态数据表示馈送到Transformer编码器,该编码器学习将它们合并成患者的综合表示,通过预测临床评分来完成此任务。这种分层任务被表述为序数分类,以在表示空间中强制执行病理连续体。我们在 239 名高血压患者的队列中观察到沿此连续体的主要趋势,为描述高血压对各种心脏功能描述符的影响提供了前所未有的细节。我们的分析表明:i) XTab 基础模型的架构即使在数据量有限的情况下(少于 200 个训练样本)也能达到出色的性能(98% 的 AUROC);ii) 人群之间的分层在训练之间是可重复的(在 3.6% 的 MAE 内);iii) 描述符中出现了模式,其中一些模式与已建立的高血压生理知识一致,而另一些模式则可能为更全面地了解这种病理铺平道路。