LLM2D
两位AI科学家意见一致吗?
Do Two AI Scientists Agree?
作者: Xinghong Fu, Ziming Liu, Max Tegmark
发布日期: 4/4/2025
arXiv ID: oai:arXiv.org:2504.02822v1

摘要

arXiv:2504.02822v1 宣告类型: 新 摘要: 当两个AI模型在同一项科学任务上进行训练时,它们会学到相同的理论还是不同的理论?纵观科学史,我们见证了由实验验证或证伪推动的理论的兴起和衰落:当实验数据不足时,可能存在许多共存的理论,但随着越来越多的实验数据变得可用,幸存理论的空间变得更加受限。我们展示了对于AI科学家来说,同样的故事也适用。随着训练数据中提供的系统越来越多,AI科学家倾向于在其学到的理论方面趋于一致,尽管有时它们会形成不同的小组,对应不同的理论。为了机械地解释AI科学家所学到的哪些理论以及衡量它们的一致性,我们提出了MASS,一种以哈密顿-拉格朗日神经网络作为AI科学家的方法,这些模型是通过在物理学中的标准问题上进行训练,并从许多种子模拟不同的AI科学家配置中汇总训练结果来实现的。我们的发现表明,对于AI科学家而言,在简单设置中从学习哈密顿理论转变为在复杂系统引入时使用拉格朗日公式。我们还观察到训练动力学和最终学习权重存在强烈的种子依赖性,控制了相关理论的兴起和衰落。最后,我们证明了我们的神经网络不仅可以帮助解释性,还可以应用于更高维的问题。