LLM2D
实时模仿人类头部运动、眨眼和情绪的NAO机器人闭-loop方法
Real-Time Imitation of Human Head Motions, Blinks and Emotions by Nao Robot: A Closed-Loop Approach
作者: Keyhan Rayati, Amirhossein Feizi, Alireza Beigy, Pourya Shahverdi, Mehdi Tale Masouleh, Ahmad Kalhor
发布日期: 4/29/2025
arXiv ID: oai:arXiv.org:2504.19985v1

摘要

arXiv:2504.19985v1 交叉类型 摘要:本文介绍了一种新的方法,通过NAO机器人实时模仿人类头部运动,重点关注提升人机交互的质量。通过使用MediaPipe作为计算机视觉库和DeepFace作为情感识别库的稳健功能,该研究旨在捕捉人类头部运动的细微之处,包括眨眼动作和情感表达,并无缝地将这些指标融入机器人的响应中。结果是一种全面的框架,使在人机交互中精确模仿头部运动成为可能,采用了一种闭环方法,该方法涉及从机器人模仿性能收集实时反馈。反馈环确保了对头部运动建模的高度准确性,如俯仰方向的R2得分为96.3,旋转方向的R2得分为98.9。值得注意的是,所提出的方法有望改善自闭症儿童的沟通,为他们提供了更有效的互动的宝贵工具。本质上,所提出的工作探索了实时头部模仿和实时情感识别的集成,以增强人机交互,对于具有独特沟通需求的个人可能具有潜在益处。