摘要
近年来,无人机检测已迅速成为一个备受关注的领域:体积有限的快速移动物体可能被用于恶意意图甚至恐怖袭击,这使得人们越来越重视开发精确且稳健的系统来检测和识别此类物体。虽然基于 RGB 数据的目标检测方面存在大量文献和研究成果,但必须认识到这种模式应用于无人机检测时的局限性。无人机检测确实面临着一些挑战,例如快速移动的物体和动态范围很大的场景,甚至更糟糕的是,照明水平不足。另一方面,神经形态相机可以在对 RGB 相机来说具有挑战性的情况下保留精确且丰富的时间空间信息。它们对高速移动物体和照明不足的环境具有鲁棒性,但在场景中的物体静止时容易造成信息快速丢失。在这种情况下,我们提出了一种将这两个领域整合在一起的新模型,利用多模态数据来充分利用两者的优势。为此,我们还发布了 NeRDD(神经形态-RGB 无人机检测)数据集,这是一个新颖的时间空间同步事件-RGB 无人机检测数据集,包含超过 3.5 小时的多模态标注记录。