LLM2D
Home
Arxiv
返回列表
基于食物状态识别的基础模型和PDDL的现实世界烹饪机器人系统
Real-World Cooking Robot System from Recipes Based on Food State Recognition Using Foundation Models and PDDL
作者:
Naoaki Kanazawa, Kento Kawaharazuka, Yoshiki Obinata, Kei Okada, Masayuki Inaba
发布日期:
10/7/2024
arXiv ID:
oai:arXiv.org:2410.02874v1
摘要
尽管对烹饪行为的需求日益增长,成为机器人预期任务之一,但基于机器人对现实世界中新菜谱描述的一系列烹饪行为尚未实现。本研究提出了一种机器人系统,该系统集成了基于大型语言模型 (LLM) 的现实世界可执行机器人烹饪行为规划和基于 PDDL 描述的经典规划,并利用视觉语言模型 (VLM) 从少量数据中学习食物成分状态识别。我们在实验中取得了成功,其中 PR2(一个双臂轮式机器人)在一个真实环境中根据安排好的新菜谱执行烹饪,并证实了所提系统的有效性。
查看原文
下载 PDF