LLM2D
基于图的在线监测驾驶员状态方法:面部和骨架特征
Graph-based Online Monitoring of Train Driver States via Facial and Skeletal Features
作者: Olivia Nocentini, Marta Lagomarsino, Gokhan Solak, Younggeol Cho, Qiyi Tong, Marta Lorenzini, Arash Ajoudani
发布日期: 5/15/2025
arXiv ID: oai:arXiv.org:2505.08800v1

摘要

arXiv:2505.08800v1 宣告类型: cross 摘要:驾驶员疲劳对铁路安全构成了重大挑战,传统的系统如死人开关提供的警报检查有限且基础。本研究提出了一种基于在线行为监测系统,利用自定义的方向图神经网络(DGNN)将列车驾驶员的状态分类为三个类别:警觉、不警觉和病理。为了优化模型的输入表示,进行了消融研究,比较了三种特征配置:骨骼特征仅有的、面部特征仅有的以及两者的组合。实验结果表明,在三类模型中,结合面部和骨骼特征的组合获得了最高准确性(80.88%),优于仅使用面部或骨骼特征的模型。此外,该组合在二元警觉性分类中的准确率超过99%。此外,我们引入了一个新的数据集,在此数据集中首次将模拟病理条件纳入了列车驾驶员的监测中,扩大了对疲劳和健康相关的风险评估范围。这项工作代表了通过基于视觉技术的先进在线监测增强铁路安全的一个进步。