摘要
arXiv:2411.14927v2 宣布类型: replace-cross
摘要:时间知觉是指检测和跨时间序列跟踪物体的能力,是自主驾驶系统中的一个基本组成部分。虽然单一车辆感知系统受到由于物体遮挡和固有的盲区导致的不完整感知限制,合作感知系统则面临传感器校准精度和定位精度的问题。为了解决这些问题,我们引入了LET-VIC,这是一种基于LiDAR的端到端跟踪框架,用于车-基础设施合作(Vehicle-Infrastructure Cooperation, VIC)。首先,我们采用时间自注意力和VIC交叉注意力模块有效地从车辆和基础设施的角度整合时空信息。然后,我们开发了一个新的传感器校准误差补偿(CEC)模块,以减轻传感器对齐问题,促进准确的特征对齐。在V2X-Seq-SPD数据集上的实验表明,LET-VIC显著优于基线模型。与LET-V相比,LET-VIC在mAP上提高了15.0%,在AMOTA上提高了17.3%。此外,在不考虑通信延迟的情况下,LET-VIC优于代表性的检测跟踪模型,如V2VNet、FFNet和PointPillars,在mAP上提高了至少13.7%,在AMOTA上提高了13.1%,展示了其稳健的检测和跟踪性能。实验表明,将多视图视角、时间序列或CEC整合到端到端训练中,显著提高了检测和跟踪性能。所有代码都将开源。