arXiv:2504.02252v1 Announce Type: 跨领域 摘要：从模拟到现实的实际增强学习（RL）面临着一个关键挑战，即协调模拟和现实世界动力学之间的差异，这可能会严重降低智能体的表现。一种有希望的方法是学习作为残差误差函数表示的模拟器前向动力学的修正，然而这种方法在高维状态，如图像的情况下是不切实际的。为了解决这个问题，我们提出了一种名为ReDRAW的方法，这是一种针对模拟预训练并在通过潜状态动力学的残差修正来校准目标环境的自动回归世界模型。使用这种适应后的世界模型，ReDRAW使RL智能体能够在修正后的动力学条件下进行想象中的滚动优化，并然后部署到现实世界中。在多个基于视觉的MuJoCo领域和一个Physical机器人视觉车道跟随任务中，ReDRAW有效地模拟了动力学的变化，并避免了在传统迁移方法失败的低数据条件下过拟合。