arXiv:2502.10303v1 宣告类型: 新 摘要: 强化学习（RL）已在许多应用中得到广泛应用，特别是在游戏领域，这为AI模型提供了卓越的训练平台。谷歌DeepMind在这一领域进行了创新，采用了包括模型导向、模型无关以及深度Q网络在内的强化学习算法，创建了如AlphaGo、AlphaGo Zero和MuZero等先进的AI模型。最初的AlphaGo结合了监督学习和强化学习，掌握了围棋，超越了职业人类选手。AlphaGo Zero改进了这种方法，不再依赖人类游戏数据，而是通过自我对弈提高学习效率。MuZero进一步扩展了这些进步，无需明确定义的游戏规则知识来学习游戏环境的基本动力学，实现了跨各种游戏（包括复杂的Atari游戏）的适应性。本文回顾了强化学习在Atari和策略游戏中的应用意义，分析了这三种模型的关键创新、训练过程、遇到的挑战以及改进措施。此外，我们还讨论了游戏领域的进展，包括MiniZero和多智能体模型，强调了未来的方向和来自谷歌DeepMind的新兴AI模型。