arXiv:2504.07425v1 类型: 新增 摘要: 深度强化学习(DRL)在各种游戏类型中有效提升了游戏体验和游戏设计。然而，针对格斗游戏代理的研究鲜有直接关注提升玩家乐趣，这是一个对开发者和玩家来说都至关重要的因素。为了解决这一问题并建立一个设计以乐趣为重的代理的实际基线，我们提出了一种两层代理(TTA)系统，并在经典的格斗游戏街机战士II中进行了实验。TTA的第一层采用了任务导向的网络架构、模块化的奖励函数和混合训练，以生成多样且技能高超的DRL代理。TTA的第二层则利用了玩家的游戏数据和反馈，动态选择合适的DRL对手。此外，我们还研究了几个影响对手乐趣的关键因素，并对其进行了建模。实验显示，与基线方法相比，高级技能的执行提升了99.00%（从64.36%提升到156.36%）。训练后的代理还展示了独特的游戏玩法风格。另外，我们还开展了小型用户研究，玩家的整体反馈验证了我们的TTA系统的有效性。