arXiv:2502.00779v1 类型: cross 摘要：可穿戴传感器数据的分析在多个应用中取得了许多成功。为了用足够的细节表示高采样率的时间序列，已经考虑使用拓扑数据分析（TDA），并发现TDA可以补充其他时间序列特征。然而，由于通过TDA提取拓扑特征所需的时间消耗大且计算资源需求高，很难在各种应用中部署拓扑知识。为了解决这个问题，可以采用知识蒸馏（KD）技术，这是一种通过从大型网络传输知识来生成较小模型，从而使模型压缩和迁移学习的技术。通过利用KD中的多个教师，可以同时传输时间序列和拓扑特征，最终通过仅使用时间序列数据生成一个更优秀的学生模型。另一方面，mixup 是一种广泛使用的鲁棒数据增强技术，用于在训练期间增强模型性能。KD和mixup采用类似的学习策略。在KD中，学生模型从教师模型生成的平滑分布中学习，而mixup则是通过混合两个标签生成平滑标签。因此，这种共同的平滑性作为连接这两个方法的纽带。在本文中，我们使用时间序列以及拓扑持久性分析了KD中mixup的作用，并采用了多个教师。我们对KD和mixup在可穿戴传感器数据中的各种方法进行了全面分析。