摘要
arXiv:2504.06994v1 Announce Type: cross
摘要:开放集语义映射对于开放世界机器人至关重要。当前的映射方法要么受限于深度范围,要么仅限于在受限环境中映射超出范围的实体,整体上它们无法将范围内外的观测结果结合起来。此外,这些方法在细节语义和效率之间做出权衡。我们引入了RayFronts这一统一表示,使其能够实现密集和超出范围的高效语义映射。RayFronts对范围内的体素和映射边界处编码的超出范围射线编码任务无关的开放集语义,从而使机器人能够显著减少搜索体积,并在范围内外做出有根据的决策,同时在Orin AGX上运行速度达到8.84 Hz。在范围内的语义上进行基准测试表明,RayFronts的详细图像编码提供了1.34倍的零样本3D语义分割性能,同时提高了16.5倍的吞吐量。传统上,实时映射性能与其他系统组件交织在一起,增加了评估的复杂性。我们提出了一种规划器无关的评估框架,能够捕捉超出范围搜索和探索的实用性,并显示RayFronts比最近的实时基线更高效地减少了2.2倍的搜索体积。