arXiv:2505.02052v1 传感器类型: 新 摘要: 基于传感器的人体活动识别（HAR）主要集中在惯性测量单元和视觉数据上，往往忽视了压力传感器的独特能力，这些传感器能够捕捉细微的身体动态和质心变化。尽管它们在姿势和平衡相关的活动中具有潜力，但由于可用数据集的限制，压力传感器在HAR领域中的应用仍然不足。为了弥补这一缺口，我们提出利用生成式基础模型与压力专用的人体活动识别技术相结合。具体而言，我们提出了一种双向Text×Pressure模型，该模型使用生成式基础模型将压力数据解释为自然语言。TxP完成两个任务：(1) Text2Pressure，将活动文本描述转换为压力序列；(2) Pressure2Text，从动态压力地图中生成活动描述和分类。利用预训练模型如CLIP和LLaMA 2 13B Chat，TxP在我们的合成PressLang数据集上进行训练，该数据集包含超过81,100个文本-压力对。在瑜伽和日常任务等实际活动中进行验证，TxP提供了基于原子动作的数据增强和分类的新方法。这使得HAR性能在宏F1分数上提高了最多12.4%，从而推动了基于压力的HAR在更广泛的应用和更深入的人体运动洞察方面的发展。