将机械臂与腿式机器人的移动性相结合对于各种机器人应用至关重要。然而，将机械臂与移动底座集成会显著增加系统的复杂性，从而使末端执行器精确控制变得困难。现有的基于模型的方法往往受到其建模假设的限制，导致鲁棒性有限。同时，最近的强化学习 (RL) 实施将机械臂的工作空间限制在机器人前方，或仅跟踪位置以获得良好的跟踪精度。在这项工作中，我们通过引入一种针对粗糙、非结构化地形上大型工作空间中末端执行器姿态跟踪的全身 RL 公式来解决这些限制。我们提出的方法包括针对机器人初始配置和末端执行器姿态命令的地形感知采样策略，以及基于游戏的课程，以扩展机器人的操作范围。我们在配备六自由度机械臂的 ANYmal 四足机器人上验证了我们的方法。通过我们的实验，我们表明所学习的控制器在大型工作空间中实现了精确的命令跟踪，并在楼梯和斜坡等不同地形之间适应。在部署中，它实现了 2.64 厘米和 3.64 度的姿态跟踪误差，优于现有的竞争基线。