LLM2D
ChronoFormer:考虑时间的变换器架构用于结构化临床事件建模
ChronoFormer: Time-Aware Transformer Architectures for Structured Clinical Event Modeling
作者: Yuanyun Zhang, Shi Li
发布日期: 4/11/2025
arXiv ID: oai:arXiv.org:2504.07373v1

摘要

arXiv:2504.07373v1 通知类型: 交叉 摘要:电子健康记录(EHR)数据的时间复杂性为使用机器学习预测临床结果带来了重大挑战。本文提出了ChronoFormer,这是一种创新的基于变压器的架构,专门设计用于编码和利用纵向患者数据中的时间依赖性。ChronoFormer结合了时间嵌入、层次注意力机制和领域特定的遮罩技术。在死亡预测、再入院预测和长期共病发病的三个基准任务上进行的详尽实验表明,ChronoFormer在当前最先进的方法上取得了显著改进。此外,对注意力模式的详细分析强调了ChronoFormer捕捉具有临床意义的长期时间关系的能力。