LLM2D
自动提取时空语义图以识别认知 impairment
Automated Extraction of Spatio-Semantic Graphs for Identifying Cognitive Impairment
作者: Si-Ioi Ng, Pranav S. Ambadi, Kimberly D. Mueller, Julie Liss, Visar Berisha
发布日期: 2/5/2025
arXiv ID: 2502.01685

摘要

arXiv:2502.01685v1 事件类型: 新增 摘要: 现有的方法在评估认知-语言障碍时,通常会忽略参与者在描述图画时的视觉叙事路径,这通常需要通过眼动追踪来评估。空间语义图对于仅凭转录信息分析这一叙事路径非常有用,但它们受限于需要手动标记内容信息单元(CIUs)。在本文中,我们提出了一种自动化方法,通过自动化提取CIUs来估计空间语义图(以通常用于认知-语言分析的偷饼干图为例)。该方法使我们能够自动描述图片描述过程中的视觉语义路径。实验表明,自动获取的空间语义图能够有效地区分认知受损和未受损的说话者。统计分析显示,自动方法提取的特征与手动方法提取的特征具有可比性,不同临床组间的团体差异甚至更大。这些结果突显了自动方法在开发用于认知障碍评估的临床语言模型中提取空间语义特征的潜力。