LLM2D
开放-CRB:面向开放世界的3D目标检测主动学习
Open-CRB: Towards Open World Active Learning for 3D Object Detection
发布日期: 9/24/2024
arXiv ID: oai:arXiv.org:2310.10391v2

摘要

基于LiDAR的3D物体检测最近通过主动学习(AL)取得了显著进展,通过训练少量策略性选择的点云达到了令人满意的性能。然而,在现实世界的应用中,流媒体点云可能包含未知或新的物体,目前的AL方法捕捉这些物体的能力尚未探索。本文研究了一个更实际且更具挑战性的研究任务:3D物体检测的开放世界主动学习(OWAL-3D),旨在获取包含新概念的有信息点云。为解决这一挑战,我们提出了一种简单但有效的策略,称为开放标签简洁性(OLC),该策略以最低的标注成本挖掘新颖的3D物体。我们的实验证明,OLC仅通过一轮选择就成功地将3D检测模型适应于开放世界场景。任何通用的AL策略都可以与所提出的OLC集成,以有效解决OWAL-3D问题。在此基础上,我们介绍了Open-CRB框架,该框架将OLC与我们初步的AL方法CRB无缝集成,专为3D物体检测设计。我们开发了一个全面的代码库,以便于复现和未来研究,支持15种基准方法(例如,主动学习、分布外检测和开放世界检测),2种现代3D检测器(例如,单阶段SECOND和双阶段PV-RCNN)和3个基准3D数据集(例如,KITTI、nuScenes和Waymo)。大量实验表明,所提出的Open-CRB在识别新类和已知类方面展示了优越性和灵活性,与最先进的基准方法相比,标注成本极低。源代码可在\url{https://github.com/Luoyadan/CRB-active-3Ddet/tree/Open-CRB}获取。