LLM2D
Home
Arxiv
返回列表
基于食物状态识别的基础模型与PDDL的真实世界烹饪机器人系统
Real-World Cooking Robot System from Recipes Based on Food State Recognition Using Foundation Models and PDDL
作者:
Naoaki Kanazawa, Kento Kawaharazuka, Yoshiki Obinata, Kei Okada, Masayuki Inaba
发布日期:
10/7/2024
arXiv ID:
oai:arXiv.org:2410.02874v2
摘要
尽管对烹饪行为作为机器人预期任务之一的需求日益增长,但基于机器人对现实世界中新菜谱描述的一系列烹饪行为尚未实现。在本研究中,我们提出了一种机器人系统,该系统集成了使用大型语言模型 (LLM) 和 PDDL 描述的经典规划的真实可执行机器人烹饪行为规划,以及使用视觉语言模型 (VLM) 从少量数据中学习食物成分状态识别。我们成功地进行了实验,其中 PR2(一款双臂轮式机器人)在现实环境中根据排列好的新菜谱进行烹饪,并证实了所提系统的有效性。
查看原文
下载 PDF