摘要
arXiv:2501.03916v3 闭环类型: 替换
摘要:科学研究范式正在由于人工智能(AI)的发展而经历一场深刻的转变。近期的研究表明,各种AI辅助的研究方法可以通过改进数据分析、加快计算以及促进新颖想法的生成,大大提升研究效率。为了进一步向最终目标(即自动科学研究)迈进,在本文中,我们介绍了一种闭环的以LLM驱动的框架Dolphin,以提高科学研究的自动化水平。Dolphin首先基于之前实验和按主题及任务属性排序的相关论文的反馈生成新颖的想法。然后,生成的想法可以通过一个经过设计并调试好的异常跟踪指导的局部代码结构实现模板来实现。最后,Dolphin会自动分析每个想法的结果,并将结果反馈到下一轮想法生成中。在不同主题的基准数据集和MLE-bench的一部分数据集上进行了实验。结果显示,Dolphin可以在循环中持续改善输入主题的表现。我们强调,Dolphin能够自动提出与某些任务(如3D点分类)的最新方法相当的方法。