LLM2D
超越监视:混合现实可视化与AI增强的数字病理学工作流程
Beyond the Monitor: Mixed Reality Visualization and AI for Enhanced Digital Pathology Workflow
作者: Jai Prakash Veerla, Partha Sai Guttikonda, Helen H. Shang, Mohammad Sadegh Nasr, Cesar Torres, Jacob M. Luber
发布日期: 5/6/2025
arXiv ID: oai:arXiv.org:2505.02780v1

摘要

arXiv:2505.02780v1 宣告类型: 交叉 摘要:病理学家依赖百万像素级的整个切片图像(WSIs)来诊断癌症等疾病,但当前的数字病理工具妨碍了诊断。WSIs 的巨大规模,通常超过 100,000×100,000 像素,与传统显示器提供的有限视图形成了矛盾。这种不匹配要求病理学家不断平移和缩放,增加了其认知负担,导致诊断疲劳,并减缓了病理学家采用数字方法的速度。PathVis,我们的用于 Apple Vision Pro 的混合现实可视化平台,解决了这些挑战。它改变了病理学家与数据的交互方式,用直观的探索替代了笨重的鼠标和显示器导航,通过沉浸式的工位空间使用自然的手势、注视和语音命令进行直观探索。PathVis 结合 AI 来增强诊断。一个基于 AI 的搜索功能可以立即检索并并排显示与其最相似的前五个患者病例,通过快速比较来提高诊断的准确性和效率。此外,多模式的对话式 AI 助手提供实时图像解释支持,并帮助病理学家在多个 Apple 设备上协作。通过将传统的病理直接性与先进的混合现实可视化和 AI 融合,PathVis 改进了诊断流程,减轻了认知压力,并使病理实践更加有效和引人入胜。PathVis 的源代码和演示视频可在以下网址获取:https://github.com/jaiprakash1824/Path_Vis