arXiv:2502.05244v1 申明类型: 新 摘要: 人工智能通常指的是模拟和工程实现能够执行通常需要人类智能的任务的系统，例如玩游戏、翻译语言和驾驶汽车。近年来，在基于学习、数据驱动的AI方法方面取得了令人兴奋的进展，机器学习和深度学习使计算机系统以前所未有的方式感知世界。强化学习使围棋等复杂游戏和四足机器人行走等挑战性机器人任务取得了突破。 智能的一个关键方面不仅在于做出预测，还需要考虑这些预测中的不确定性，并在做决策时考虑这种不确定性。这就是这篇题为“概率人工智能”的文章所探讨的内容。文章的第一部分涵盖了概率方法在机器学习中的应用。我们讨论了由于数据不足导致的“先验”不确定性与不可约的“统计”不确定性之间的区别，后者来源于噪音观测和结果等。我们讨论了具体的概率推断方法以及现代高效的近似推断方法。 文章的第二部分是关于在序列决策任务中考虑不确定性。我们考虑了主动学习和贝叶斯优化——这些方法通过提出信息收集实验以减少先验不确定性来收集数据。然后，我们考虑了使用神经网络函数逼近的强化学习和现代深度强化学习方法。最后，我们讨论了结合先验和统计不确定性进行模型强化学习的现代方法，这些方法在指导探索的同时还考虑安全性。