arXiv:2402.11498v3 宣告类型: replace-cross 摘要: 在指导机器人时，用户希望灵活地表达约束条件、引用任意地标，并验证机器人的行为，而机器人则必须将指令解析为规范，并在现实世界中确定指令引用的实体。为了解决这一问题，我们提出了语言指令的运动规划（LIMP），这是一种使机器人能够在没有预构建语义地图的情况下，遵守复杂且开放式的指令并验证其行为的方法。LIMP 构建了一种符号化的指令表示，揭示了机器人与指导者意图的一致性，并为合成正确的机器人行为提供了支持。我们在五个现实世界环境中对150条指令进行了大规模评估，展示了LIMP在各种非结构化领域中的多功能性和易于部署性。在标准的开放式词汇任务中，LIMP 的表现与最先进的基准相当，并且在复杂的时空指令上实现了79% 的成功率，远高于仅达到38% 的基准。更多信息和演示视频请参见 https://robotlimp.github.io