arXiv:2504.18794v2 宣称类型: 替换 摘要：层级强化学习（HRL）被认为能够在具有稀疏奖励方案的机器人学习任务中利用固有的层级结构，这与传统的强化学习算法不同。在本次研究中，层级强化学习被评估并与其他标准的强化学习算法在复杂的导航任务中进行对比。我们评估了HRL的独特特性，包括它们创建子目标的能力以及终止函数。我们构建了实验来测试PPO和HRL之间的差异、创建子目标的不同方式、手动与自动创建子目标以及终止频率对性能的影响。这些实验突显了HRL的优势及其如何实现这些优势。