摘要
arXiv:2504.14054v1 宣告类型: cross
摘要:标准语义实例分割提供了来自单张图像的有用但本质上是二维的信息。为了使分析成为三维分析,通常需要将单目绝对深度估计与实例分割结合起来。然而,单目深度估计是一个困难的任务。相反,我们利用了一个更简单的单图像任务,基于遮挡的相对深度排序,提供更粗糙但有用的三维信息。我们发现相较于绝对深度,相对深度排序从遮挡中获得信息更可靠。我们提出了一种解决基于遮挡的相对深度排序和实例分割联合任务的方法。我们将这一任务称为基于遮挡的有序语义实例分割(OOSIS)。我们开发了一种解决OOSIS的方法,该方法从定向遮挡边界和语义分割中同时提取实例及其遮挡顺序。与流行的基于检测-分割框架的实例分割方法不同,将遮挡排序与实例分割结合起来,使OOSIS作为一个标签问题有了简单明了的表述。作为我们解决OOSIS方案的一部分,我们开发了一种新颖的定向遮挡边界方法,其性能显著优于先前的工作。我们还开发了一种新的联合OOSIS度量标准,该度量标准既基于实例掩码的准确性,也基于其遮挡顺序的正确性。我们在KINS和COCOA数据集上实现了优于强基线模型的性能。