LLM2D
UNCV2024年BRAVO语义分割挑战赛结果
The BRAVO Semantic Segmentation Challenge Results in UNCV2024
作者: Tuan-Hung Vu, Eduardo Valle, Andrei Bursuc, Tommie Kerssies, Daan de Geus, Gijs Dubbelman, Long Qian, Bingke Zhu, Yingying Chen, Ming Tang, Jinqiao Wang, Tom\'a\v{s} Voj\'i\v{r}, Jan \v{S}ochman, Ji\v{r}\'i Matas, Michael Smith, Frank Ferrie, Shamik Basu, Christos Sakaridis, Luc Van Gool
发布日期: 10/10/2024
arXiv ID: oai:arXiv.org:2409.15107v2

摘要

我们提出统一的BRAVO挑战赛,以基准测试语义分割模型在现实扰动和未知非独立同分布(OOD)场景下的可靠性。我们定义了两种可靠性类别:(1)语义可靠性,反映模型在暴露于各种扰动时的准确性和校准性;(2)OOD可靠性,衡量模型检测训练期间未知的对象类别能力。这项挑战赛吸引了来自国际团队的近100份投稿,这些团队代表着著名的研究机构。结果揭示了大规模预训练和最小化架构设计在开发鲁棒且可靠的语义分割模型方面的重要性。