LLM2D
从癌症组织病理学生成跨模态基因表达以改善多模态AI预测
Generating crossmodal gene expression from cancer histopathology improves multimodal AI predictions
作者: Samiran Dey, Christopher R. S. Banerji, Partha Basuchowdhuri, Sanjoy K. Saha, Deepak Parashar, Tapabrata Chakraborti
发布日期: 2/13/2025
arXiv ID: oai:arXiv.org:2502.00568v3

摘要

arXiv:2502.00568v3 宣告类型: replace-cross 摘要:新兴的研究表明,基于人工智能的数字病理和转录组特征的多模态融合可以提高癌症诊断(分级/分型)和预后(生存风险)的预测。然而,在实际的临床环境中,这种直接的多模态融合在联合决策方面是不切实际的,病理组织学仍然是诊断的黄金标准,而转录组测试在公共医疗保健系统中很少被要求。凭借我们新颖的基于扩散的跨模态生成AI模型PathGen,我们展示了从数字病理组织学合成的基因表达可以高精度地(达到前沿性能)、高确定性地(通过满意覆盖保证)和可解释地(通过分布式注意力图)预测癌症分级和患者生存风险。PathGen的代码可通过GitHub(https://github.com/Samiran-Dey/PathGen)供研究社区开放使用。