LLM2D
CMD-HAR: 跨模态解耦的人体活动识别
CMD-HAR: Cross-Modal Disentanglement for Wearable Human Activity Recognition
作者: Hanyu Liu, Siyao Li, Ying Yu, Yixuan Jiang, Hang Xiao, Jingxi Long, Haotian Tang
发布日期: 3/31/2025
arXiv ID: oai:arXiv.org:2503.21843v1

摘要

arXiv:2503.21843v1 交叉类型 摘要:人体活动识别(HAR)是众多以人类为中心的智能应用的基础技术。尽管已经利用深度学习方法来加速特征提取,但多模态数据混叠、活动异构性和复杂模型部署等问题仍主要未得到有效解决。本文旨在解决传感器基础人体活动识别中的多模态数据混叠、活动异构性和复杂模型部署等问题。我们提出了一种时空注意力模态分解对齐融合策略,以应对传感器数据的混合分布问题。通过跨模态的空间-时间解纠缠表示捕捉活动的关键判别特征,并结合梯度调制以缓解数据异构性。此外,我们还构建了一个可穿戴部署模拟系统。我们在大量的公开数据集上进行了实验,证明了该模型的有效性。