系统梳理 The AI Scientist、EvoScientist、ScienceClaw、DeepScientist 等代表性系统,分析自动化科研的演进轨迹、技术架构与工程启示——特别是对训练数据合成的深层影响。
2026 年 3 月,两件事标志着自动化科研进入新纪元:Sakana AI 团队的 The AI Scientist 论文登上 Nature(3 月 25 日),华为 EvoScientist 的 6 篇 AI 生成论文全部被 ICAIS 2025 接收(含最佳论文奖)。自动化科研不再是概念验证——它正在产出能通过同行评审的真实科学成果。
如果 AI 能自主完成"假设 → 实验 → 分析 → 写作"的科研全流程,那它的中间产物——结构化推理轨迹、实验代码、数据分析过程——本身就是极高质量的训练数据。自动化科研系统可能是目前最被低估的训练数据工厂。
基于华中科技大学 Tie et al. 的综述《A Survey of AI Scientists》(arXiv:2510.23045),自动化科研经历了三个清晰的发展阶段。
系统聚焦科学流程中的单一环节。DS-1000 解决数据科学代码生成,Coscientist(Nature 2023)首次在真实实验室完成闭环化学实验,ChemCrow(NMI 2024)集成 18 个化学专家工具,MLAgentBench 建立了 ML 研究的基准测试。这一阶段的关键词是:垂直深耕
The AI Scientist v1(Sakana AI, 2024.08)首次实现了完整的六阶段闭环:文献回顾 → 想法生成 → 实验准备 → 实验执行 → 科学写作 → 论文生成。SciAgents(MIT, 2024.09)探索了多智能体在想法生成阶段的协作。这一阶段的关键词是:全流程打通
三条并行前沿:AI Scientist v2 通过树搜索消除模板依赖,论文首次通过 ICLR 同行评审;DeepScientist(西湖大学)用贝叶斯优化追求前沿发现;EvoScientist(华为)引入持久记忆实现自我进化。ScienceClaw(中科紫东太初)覆盖八大学科,内置 1900+ 工具。这一阶段的关键词是:进化 & 规模化
所有自动化科研系统都可以用这个六阶段框架来解构和对比。完整覆盖六个阶段的系统才是真正的"端到端"。
| 系统 | 机构 | 年份 | 文献 | 想法 | 准备 | 执行 | 写作 | 论文 | 特色 |
|---|---|---|---|---|---|---|---|---|---|
| Coscientist | CMU | 2023 | ✅ | ✅ | ✅ | 真实实验室 | |||
| ChemCrow | EPFL | 2024 | ✅ | ✅ | ✅ | ✅ | 18 化学工具 | ||
| AI Scientist v1 | Sakana AI | 2024 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | 首个端到端 |
| AI Scientist v2 | Sakana AI | 2025 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | 树搜索+无模板 |
| AI-Researcher | HKU | 2025 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | Scientist-Bench |
| DeepScientist | 西湖大学 | 2025 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | 贝叶斯优化 |
| EvoScientist | 华为 | 2026 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | 持久记忆进化 |
| ScienceClaw | 中科紫东太初 | 2026 | ✅ | ✅ | ✅ | ✅ | ✅ | ✅ | 1900+ 工具 |
核心贡献:首次实现了从"想法 → 代码 → 实验 → 写作 → 评审"的完整自动化闭环。
v1(2024.08):基于人工代码模板的集中模式。4 个顺序阶段:想法生成(Semantic Scholar API 去重)→ 实验执行(线性计划)→ 手稿生成(LaTeX 模板)→ 自动评审(5 评审 + 元评审)。
v2(2025.04):关键升级——消除人工模板,引入渐进式智能体树搜索(Progressive Agentic Tree Search),由实验管理器智能体统筹。新增 VLM 反馈循环优化图表质量。
Nature 论文关键实证:
核心创新:持久记忆驱动的自我进化。现有系统是"无状态"的——每次任务从零开始。EvoScientist 通过记忆库让 AI 越用越聪明。
三智能体架构:
双记忆系统:
实证成果:
与 AI Scientist 的关键区别:AI Scientist 追求"数量"(大量生成论文),DeepScientist 追求"质量"(聚焦人类定义的前沿科学问题)。
核心方法:用贝叶斯优化建模科学发现全周期,在"探索新假设"和"利用已有知识"之间自动平衡。采用渐进式工作流:宽泛调研 → 聚焦假设 → 实验验证 → 结果分析 → 论文撰写。
特色能力:
定位差异:与 AI Scientist / EvoScientist 的"端到端论文生成"不同,ScienceClaw 更像一个全能科研助理——覆盖药物发现、天文学、化学材料等八大学科的全流程任务执行。
两个版本:
技术亮点:
对比各系统后,我们提炼出五个反复出现的关键技术模式:
AI Scientist v2 引入树搜索替代线性计划,允许分支探索和回溯。DeepScientist 用贝叶斯优化实现类似的探索-利用平衡。
EvoScientist 的双记忆系统(想法 + 实验)是核心创新。这解决了 AI 科研的"健忘症"问题——每次任务不再从零开始。
从 AI Scientist 的单体到 EvoScientist 的 3 智能体、ScienceClaw 的 9 智能体。分工越细,各环节质量越高。
AI Scientist 首创"自动评审员"概念:5 个独立评审 + 1 个元评审。评审准确率已达人类水平(±3%)。这实现了质量的自动筛选。
ChemCrow 18 个工具,ScienceClaw 1900+ 工具。趋势很明确:模型能力 + 外部工具生态 = 科研能力的乘数效应。
自动评审员的决策准确率已经与人类评审员处于同一水平(相差仅 3 个百分点)。这意味着 AI 科研系统可以实现完全自动化的质量控制闭环——无需人类参与即可筛选出高质量成果。
AI Scientist 目前仅限 ML 领域(实验在计算机上完成)。ScienceClaw 覆盖八大学科,ChemCrow/Coscientist 已接入真实实验室。下一步:物理世界的闭环实验自动化(机器人实验室 + AI 大脑)。
EvoScientist 的持久记忆已证明:记忆积累使代码成功率从 34% → 45%。未来系统将拥有跨项目、跨领域的长期科研直觉——类似于资深科学家数十年积累的隐性知识。
从 AI Scientist 的单智能体到 EvoScientist 的 3 智能体、ScienceClaw 的 9 智能体。趋势是模拟真实科研团队的分工协作:PI、博士生、工程师、评审员、编辑各司其职。
Nature 论文明确证实:模型能力 × 计算资源 = 论文质量。更好的基础模型和更多的推理计算预算,直接转化为更高质量的科研输出。这与 LLM 本身的 Scaling Law 高度一致。
不是"AI 替代科学家",而是 "人在环上"(Human-on-the-loop):科学家定义方向、设定约束、审核结果,AI 负责苦力活(文献检索、代码实现、图表生成、初稿撰写)。Freephdlabor 系统最能体现这一范式。
自动化科研系统的最大"副产品"不是论文本身,而是过程数据。每一次科研循环都生产大量高质量的结构化推理轨迹——这恰恰是当前 LLM 训练最稀缺的数据类型。
来源:AI Scientist 的"想法生成 → 假设验证"过程
形式:给定研究领域/问题 → 生成假设 → 设计实验 → 预测结果 → 分析偏差
价值:训练模型进行多步骤科学推理,这类数据在现有语料库中极为稀缺
来源:EvoScientist 工程智能体的四阶段实现过程
形式:任务描述 → 初始代码 → 错误信息 → 调试过程 → 最终通过的代码
价值:代码-调试对(code-debug pairs)是 Agentic Coding 模型最需要的训练数据
来源:从实验结果到图表到文字分析的完整过程
形式:原始数据 → 选择分析方法 → 执行分析 → 生成图表 → 文字解读
价值:训练模型进行数据驱动的叙事推理,从数字到洞察的跨越
来源:AI Scientist 的文献回顾 → 想法生成过程
形式:一组相关论文 → 知识空白识别 → 创新想法 → 可行性分析
价值:训练模型的"创造性综合"能力——从已有知识中发现新机会
来源:自动评审员的评审意见 + 系统的修订响应
形式:论文草稿 → 评审意见(优点/缺点/建议)→ 修订后的论文
价值:训练模型的批判性思维和自我改进能力,是 RLHF 的高质量替代
来源:EvoScientist 进化管理智能体提炼的可复用知识
形式:具体经历 → 抽象原则 → 应用条件 → 反例/边界
价值:训练模型的元学习能力——学会从经验中提炼规律
与普通合成数据不同,科研过程数据天然带有多维度的质量信号:实验是否成功运行(执行验证)、结果是否符合预期(科学验证)、论文是否通过评审(质量验证)。这三重验证使得数据筛选的可靠性远高于传统的 LLM-as-Judge。
| 策略 | 数据类型 | 推荐系统 | 预期规模 | 难度 |
|---|---|---|---|---|
| ① 科研轨迹收集 | 完整推理链 | AI Scientist (开源) | 每轮 ~50 个完整轨迹 | 中等 |
| ② 代码-调试对挖掘 | 代码生成+修复 | EvoScientist (开源) | 每轮 ~200 个代码对 | 中等 |
| ③ 评审数据生成 | 评审-修订对 | AI Scientist 自动评审员 | 每论文 5+ 评审 | 较低 |
| ④ 文献综合推理 | 知识综合链 | ScienceClaw (开源) | 每任务 ~10 条推理链 | 较高 |
| ⑤ 进化记忆提炼 | 元认知知识 | EvoScientist EMA 模块 | 每轮 ~20 条知识规则 | 较高 |
"科研是人类最高级的推理活动之一。如果我们能自动化它的过程,那这些过程数据本身就是训练下一代推理模型的最优燃料。这不是'用 AI 生成垃圾数据'——这是用 AI 的最高质量输出来训练更强的 AI。"
值得称道的是,Nature 论文团队事先获得了 ICLR 领导层和 UBC IRB 的伦理审批,并预先承诺在评审后撤回所有 AI 生成的论文,避免为完全自动化发表设定先例。这为后续研究树立了重要的伦理标杆。
自动化科研不会取代科学家,但会重新定义科学家的角色——从"亲手做实验的工匠"转变为"定义方向和审核质量的建筑师"。拥抱这些工具的科学家将获得数量级的生产力提升。
自动化科研系统是当前最被低估的训练数据来源。其过程数据(推理轨迹、代码调试对、评审修订对)具有三重自验证属性,是构建下一代推理模型的最优合成数据管道。建议立即开始收集和结构化这些数据。
自动化科研正在从"能不能做"走向"做得好不好"。2024 年证明了可行性,2025-2026 年正在逼近人类质量水平。而对数据工程而言,这场范式革命的最大红利不在终点(论文),而在路上——科研过程本身就是最珍贵的训练数据金矿。