LLM2D
少看多感:通过运动适应和阻抗控制实现通用 articulated 对象操控的 Sim-to-Real RL 方法
Watch Less, Feel More: Sim-to-Real RL for Generalizable Articulated Object Manipulation via Motion Adaptation and Impedance Control
作者: Tan-Dzung Do, Nandiraju Gireesh, Jilong Wang, He Wang
发布日期: 2/21/2025
arXiv ID: oai:arXiv.org:2502.14457v1

摘要

arXiv:2502.14457v1 宣告类型:交叉 摘要:与刚体对象操作相比,具转动关节的对象操作提出了一个独特的挑战,因为对象本身代表了一个动态环境。在本项工作中,我们提出了一种新颖的基于强化学习的处理流程,该流程配备了可变阻抗控制和利用观测历史的运动适应,以实现对具转动关节的对象操作的一般化,重点关注零样本模拟到现实世界的平滑和灵巧运动转移。为了缓解模拟到现实世界的差距,我们的处理流程减少了对视觉数据的依赖,不直接将视觉数据特征(RGBD/点云)作为策略输入,而是首先通过现成的模块提取有用的数据。此外,通过利用观测历史来推断对象运动及其内在属性,以及在模拟和现实世界中同时使用阻抗控制,我们体验到了更小的模拟到现实世界的差距。而且,我们开发了一个设计良好的训练环境,具有大量的随机化,并采用了一种专门的奖励系统(任务感知和运动感知),这使多阶段、端到端的操作成为可能,无需启发式运动规划。据我们所知,我们的策略是首次通过各种未见过的对象的广泛实验报告了84%的成功率。