arXiv:2405.15568v3 Announce Type: replace 摘要：开放生成和AI生成的算法旨在不间断地生成和解决越来越复杂的任务，为向更普遍的人工智能迈进提供了前景。为了实现这一宏伟愿景，学习必须在大量的潜在任务中进行。现有的自动生成环境的方法局限于手动预定义的、通常狭窄的环境分布，限制了它们创建任何学习环境的能力。为了解决这一限制，我们提出了一个名为OMNI-EPIC的新框架，该框架将人工多样性概念（OMNI）与代码中编程的环境（EPIC）相结合，扩展了开放生成领域的先前工作。OMNI-EPIC利用基础模型自动生成指定下一个可学习任务（即对于当前智能体的技能水平既不太简单也不太困难）和有趣的（例如，有价值的且新颖）代码。OMNI-EPIC不仅能生成环境（例如，障碍课程），还能生成奖励函数（例如，在不碰到红色物体的情况下快速通过障碍课程），使其原则上能够创建任何可模拟的学习任务。我们展示了OMNI-EPIC的爆炸性创造力，它不断创新以提出新的有趣的挑战。我们还展示了OMNI-EPIC如何适应强化学习智能体的学习进度，生成适配难度的任务。总体而言，OMNI-EPIC可以无尽地生成可学习且有趣的环境，进一步推动自我改进的AI系统和生成算法的发展。项目网站及视频：https://dub.sh/omniepic