摘要
arXiv:2412.01166v2 时空视角:类别无关的3D关键点提升
摘要:我们从时空角度提出了对2D关键点进行类别无关的3D提升的方法。我们的方法不同于现有的最先进的方法:这些方法要么是物体无关的,但只能在单个帧上操作,要么能够建模时空依赖性,但只能处理单个物体类别。我们的方法基于两个核心原则。首先,可以借鉴相似物体的通用信息,在物体特定的训练数据较少时获得更好的性能。其次,包含时间上相近上下文的窗口在整个序列中实现一致性更有优势。这两个原则使我们能够在各种动物类别上的每帧和每序列指标上超越当前最先进的方法。最后,我们释放了一个新的合成数据集,其中包括各种动物类别的3D骨架和运动序列。