论文
迈向AI研究的端到端自动化
Towards End-to-End Automation of AI Research
摘要
科学自动化是人工智能领域长期以来的抱负。尽管学界在自动化科学过程的各个单独环节上已取得重大进展,但能自主走完整个研究生命周期——从构思到发表——的系统始终遥不可及。本文给出了迄今朝着端到端自动化整个流程迈进的最有力演示。我们提出The AI Scientist,它能创建研究想法、编写代码、运行实验、绘图与分析数据、撰写完整的科学手稿,并执行自己的同行评审。其想法、执行与呈现的质量足以产出一篇由AI系统生成、通过某大型机器学习会议研讨会首轮同行评审的手稿。该研讨会的录取率为70%。我们的系统在复杂智能体系统中利用现代基础模型。我们在两种设置下评估The AI Scientist:一种是聚焦模式,使用人类提供的代码模板作为初始脚手架,就特定主题开展研究;另一种是无模板的开放式模式,借助智能体搜索进行更广泛的科学探索。两种设置都能产生多样的想法,并自动对其进行测试、报告与评估。这一成果展示了AI不断提升的科学贡献能力,并预示着科研方式的潜在范式转变。与任何具有影响力的新技术一样,它可能带来重大风险,包括加重本已不堪重负的评审系统的负担、给科学文献增添噪音。然而,若以负责任的方式发展,此类自主系统有望大幅加速科学发现。
