arXiv:2504.13037v2 宣布类型: replace-cross 摘要：心脏磁共振成像是无创心脏评估的金标准，提供了丰富的心脏解剖和生理的空间-时间视图。患者的健康因素，如人口统计学、代谢和生活方式，已知对心血管健康和疾病风险有重大影响，但这些因素仅凭CMR无法捕捉到。为了全面理解心脏健康，并为个体疾病风险提供最佳解释，必须在集成框架内同时利用CMR和患者水平的因素。最近的多模态方法开始填补这一空白，但仍往往依赖于有限的空间-时间数据，并专注于单独的临床任务，从而阻碍了对心脏健康进行全面表示的发展。为克服这些局限，我们引入了ViTa，这是一种朝着基础模型迈出的步骤，它提供了心脏的全面表示，以及对该个体疾病风险的精确解释。利用来自英国生物银行42,000名参与者的数据，ViTa结合了短轴和长轴视图的3D+T 心动电影堆栈，使心脏周期的完整捕捉成为可能。然后将这些成像数据与详细的患者水平因素相结合，实现情境意识的洞察。这种多模态范式支持一系列下游任务，包括心脏表型和生理特征的预测、心脏和代谢疾病的分割和分类，这一切都在单一统一框架内完成。通过学习一种共享的潜在表示，将丰富的成像特征与患者情境联系起来，ViTa超越了传统的任务特定模型，朝着对心脏健康的一种普遍、个体特定的理解迈进，突显了其在心脏分析中的临床效用和扩展性方面的潜力。