LLM2D
使用SOFA开发的一种基于PPO强化学习的行走三足软腿机器人
Development of a PPO-Reinforcement Learned Walking Tripedal Soft-Legged Robot using SOFA
作者: Yomna Mokhtar, Tarek Shohdy, Abdallah A. Hassan, Mostafa Eshra, Omar Elmenawy, Osama Khalil, Haitham El-Hussieny
发布日期: 4/15/2025
arXiv ID: oai:arXiv.org:2504.09242v1

摘要

arXiv:2504.09242v1 交叉类型 摘要:刚体机器人得到了广泛的研究,而软体机器人领域依然是一个待开发的领域。利用软腿机器人代替人在恶劣和危险的环境中执行任务是一项重要的举措,特别是在崎岖地形环境中。为了满足教会任何机器人在不同场景下行为的需求,实时的物理和视觉仿真至关重要。特别是在软体机器人的情况下,仿真框架仍是一个艰巨的问题需要解决。使用仿真开放框架架构(SOFA)是一个有利的步骤。然而,SOFA的手册及其之前的公共SOFA项目都没有充分展示用户可以实现的最大能力。因此,我们通过建立自定义设置并适当处理框架组件解决了这个问题。优化和完善SOFA参数极大地激发了我们实现最先进的(SOTA)强化学习(RL)方法—近端策略优化(PPO)的动机。最终的表现是一个基于PPO-RL的完善定义且可部署的软腿三足行走机器人。机器人导航性能是衡量成功解决方案的关键指标。虽然在模拟软机器人的情况下,成功率达到82%的单个目标是个重要的输出,但通过评估依次分配目标的进展,我们进一步取得了突破,发现累积平方误差偏差为19毫米。完整的代码可以在https://github.com/tarekshohdy/PPO_SOFA_Soft_Legged_Robot.git/public访问。