LLM2D
基于语义关键点的通用服装 manipulation
General-purpose Clothes Manipulation with Semantic Keypoints
作者: Yuhong Deng, David Hsu
发布日期: 3/27/2025
arXiv ID: oai:arXiv.org:2408.08160v3

摘要

arXiv:2408.08160v3 宣布类型: 替换-交叉 摘要:衣物操作是家庭机器人的一项关键能力;但由于可变形织物的复杂高维几何结构,现有的方法往往局限于特定任务,如折叠或摊平。本文提出了用于通用衣物操作的 CLASP (Clothes manipulation with Semantic keyPoints),使机器人能够对不同类型的衣物执行多种操作任务。CLASP 的关键思想是语义关键点——例如,“右肩”、“左袖”等,这是一种同时适用于感知和行动的稀疏空间语义表示。衣物的语义关键点可以从深度图像中有效提取,并足以表示广泛的衣物操作策略。CLASP 利用语义关键点在具有两层层次结构的任务规划和低级动作执行之间搭建桥梁。广泛的仿真实验表明,CLASP 在多种已见和未见任务中均优于基线方法。此外,对 Kinova 双臂系统进行的四项不同任务——折叠、摊平、悬挂和放置——的实验进一步证实了 CLASP 在真实机器人上的性能。