LLM2D
相对对比学习:用于穿戴数据的运动基础模型
RelCon: Relative Contrastive Learning for a Motion Foundation Model for Wearable Data
作者: Maxwell A. Xu, Jaya Narain, Gregory Darnell, Haraldur Hallgrimsson, Hyewon Jeong, Darren Forde, Richard Fineman, Karthik J. Raghuram, James M. Rehg, Shirley Ren
发布日期: 4/14/2025
arXiv ID: oai:arXiv.org:2411.18822v5

摘要

arXiv:2411.18822v5 宣告类型: replace-cross 摘要: 我们介绍了一种新的自监督相对对比学习方法 RelCon,用于从可穿戴加速度计传感器训练运动基础模型。首先,训练一种可学习的距离度量来捕获动机相似性和领域特定的语义信息,如旋转不变性。然后,学习到的距离为我们提供了一对加速度计时间序列的语义相似度度量,我们使用这种度量来训练我们的基础模型以建模跨时间和跨主体的时间相对关系。该基础模型在来自87,376名参与者的10亿个片段上进行训练,并在包括人类活动识别和步态指标回归在内的多个下游任务中实现了最先进的性能。据我们所知,我们是第一个展示可穿戴设备运动数据的基础模型在不同评估任务中的泛化能力的研究。