摘要
arXiv:2504.10165v2 提示类型: replace-cross
摘要:直接在无人机上通过高分辨率视频处理进行野生动物的实时跟踪尚未得到广泛探索,绝大多数现有解决方案依赖于将视频流传输到地面站以支持导航。然而,自主跨视距的动物反应飞行控制及/或特定任务的单个动物和行为识别任务在一定程度上依赖于这种能力。为应对这一挑战,我们介绍了WildLive——一种直接在无人驾驶航空器(UAV)上运行的高分辨率图像实时动物检测和跟踪框架。该系统在HD图像上以17fps+的速度和在4K视频流上以7fps+的速度进行多动物检测和跟踪,适用于高海拔飞行操作,以减少对动物的干扰。我们的系统针对Jetson Orin AGX车载硬件进行了优化。它将稀疏光流跟踪的效率与任务特定的采样相结合,并集成了优化的YOLO驱动对象检测和分割技术。本质上,计算资源集中在高不确定性的时间空间区域,以显著提高无人机处理速度,同时保持特定领域的准确性。此外,我们还介绍了WildLive数据集,该数据集包含来自肯尼亚奥尔佩jeta保育区内4K无人机视频的200,000多个标注的动物实例,共有19,000多帧。所有帧均包含真实边界框、分割掩码、以及个体跟踪片段和跟踪点轨迹。我们在OC-SORT、ByteTrack和SORT等当前对象跟踪方法中对我们的系统进行了比较。我们的材料可在以下地址获取:https://dat-nguyenvn.github.io/WildLive/