摘要
arXiv:2407.12663v2 安全类型: 替换交叉
摘要:自主无人驾驶飞行器的安全可靠发展依赖于系统能够根据传感器输入识别和适应当地环境变化的能力。最先进的局部跟踪和轨迹规划通常使用相机传感器输入到飞行控制算法中,但环境干扰如雨水对其性能的影响程度尚不清楚。在本文中,我们首先开发了一个包含约335k张图像的开放数据集,以研究在七种不同的降水条件下这些影响,并表明最先进的视觉里程计系统(VINS-Fusion)在最坏情况下可能的平均跟踪误差为1.5米。随后,我们使用数据集训练了一组适合移动和受限部署场景的深度神经网络模型,以确定是否可以高效准确地分类这些“雨天”条件。这些最轻量级的模型(MobileNetV3小)可以在内存占用仅为1.28 MB且帧率为93 FPS的情况下实现90%的准确率,这适用于资源受限和对时延敏感的系统。我们使用典型飞行计算机硬件展示了毫秒级的分类延迟。因此,这种模型可以作为自主飞行控制器的扰动估计组件的一部分。此外,能够实时准确确定环境条件的无人驾驶飞行器的数据可能有助于开发更细致的局部天气预报。