摘要
arXiv:2504.01024v1 声明类型: cross
摘要:在神经康复应用中,通过手部运动预测来检测人类意图对于驱动上肢辅助机器人至关重要。然而,传统的依赖生理信号测量的方法受到限制,往往缺乏环境背景。我们提出了一种新的方法,用于预测未来的手部姿态和关节位置序列。该方法结合了注视信息、历史手部运动序列和环境物体数据,能够动态适应患者的辅助需求,无需事先知道抓取对象的意图。具体而言,我们使用向量量化变分自编码器进行稳健的手部姿态编码,并使用自回归生成变换器进行有效的手部运动序列预测。我们在健康受试者参与的初步研究中展示了这些新方法的实用性。为了训练和评估所提出的方法,我们收集了一个包含来自多名受试者的不同类型物体的各种抓取动作的数据集。通过广泛的实验,我们证明了提出的方法能够成功预测序列手部运动。尤其值得注意的是,注视信息在较少输入帧的情况下显著增强了预测能力,突显了提出的方法在实际应用中的潜力。