arXiv:2503.17132v2 通告类型: replace-cross 摘要: 本文探讨了脉冲神经网络(SNNs)与事件驱动摄像头在隐私保护的人体动作识别(HAR)中的前景互补。事件驱动摄像头只捕捉运动的轮廓这一独特功能，结合SNNs在通过脉冲处理时空数据方面的专长，为事件驱动HAR提供了很强的协同兼容性。然而，先前的研究由于SNNs处理长期时空信息的能力有限，使得准确的人体动作识别变得困难。在本文中，我们引入了两个新的框架来解决这一问题：时间段基SNN(TS-SNN)和3D卷积SNN(3D-SNN)。TS-SNN通过将动作分成更短的片段来提取长期的时空信息，而3D-SNN则用3D组件替换2D空间元素，以促进时空信息的传递。为了促进事件驱动HAR的进一步研究，我们创建了一个数据集FallingDetection-CeleX，该数据集使用高分辨率的CeleX-V事件驱动摄像头（分辨率为1280×800）收集，并包括7种不同的动作。广泛的实验结果表明，我们提出的框架在我们新收集的数据集以及另外三个神经形态数据集上超过了最先进的SNN方法，展示了它们在处理事件驱动HAR中的长期时空信息方面的有效性。