LLM2D
MPT:一个大规模多浮游植物追踪基准
MPT: A Large-scale Multi-Phytoplankton Tracking Benchmark
作者: Yang Yu, Yuezun Li, Xin Sun, Junyu Dong
发布日期: 10/23/2024
arXiv ID: oai:arXiv.org:2410.16695v1

摘要

浮游植物是水生生态系统的重要组成部分,对其进行有效监测可以为海洋环境和生态系统变化提供宝贵的见解。传统的浮游植物监测方法往往复杂且缺乏及时性分析。因此,深度学习算法为浮游植物自动监测提供了一种有前景的方法。然而,缺乏大规模、高质量的训练样本已成为推进浮游植物追踪的主要瓶颈。本文提出一个具有挑战性的基准数据集——多浮游植物追踪数据集 (MPT),该数据集涵盖了不同的背景信息和观察过程中运动的变化。该数据集包括27种浮游植物和浮游动物,14种不同的背景以模拟多样化和复杂的水下环境,以及总共140个视频。为了实现对浮游植物的准确实时观测,我们引入了一种多目标跟踪方法——偏差校正多尺度特征融合跟踪器 (DSFT),该方法解决了跟踪过程中焦点偏移以及计算帧间相似性时小型目标信息丢失等问题。具体来说,我们引入了一个额外的特征提取器来预测标准特征提取器输出的残差,并基于提取器不同层的特征计算多尺度帧间相似性。在MPT上的大量实验已经证明了该数据集的有效性和DSFT在浮游植物跟踪方面的优越性,为浮游植物监测提供了一种有效的解决方案。