EN

AI FOR SCIENCE · 访谈

斯坦福的 James Zou:模型会回答问题,不会提出问题;下一步要扩展的是一起工作的智能体数量

嘉宾
James Zou斯坦福大学生物医学数据科学副教授,主持斯坦福 AI for Science 实验室人物页:任职与记录 →
公司
Stanford University机构页:融资、人物、研究 →
来源
Decoding Bio ↗发布于
核心信号

Zou 说,今天的模型被训练来回答问题,而不是提出问题,选题仍是人的事。他的实验室接下来押注的是让更多智能体一起工作,并研究它们作为一个群体怎样行事:谁来质疑,怎样分工,谁来审稿。

这次新增

他给出两项实验室结果,没有点名论文,也没有数字:从 Virtual Lab 的团队里拿掉“怀疑者”智能体,错误明显变多;在组织研究里给人做的团队协作练习上,AI 团队常常比人类团队差得多。他还把 Agents4Science 里三家模型审稿打分的差别读成各自的默认性格,并主张 AI 审稿只管客观错误。

当前边界

这是一篇经 AI 编辑的书面问答,讲的是方法和方向,不是某一项结果。怀疑者和团队协作两项发现他都没给数字;能连续几个月闭环做研究的系统,他说还要先解决创造力、提问和协调,没有点名已有的系统。

01

访谈里说了什么

  1. 模型会答题,不会出题

    他说预训练、后训练和强化学习奖励的都是把问题答好,没有奖励提出好问题,所以 AI 在提问上的进展少得多。决定问什么还要靠人的创造力和品味,不同研究者对什么问题有意思判断不同。他希望人仍然负责、做监督,每位研究者背后有一个“虚拟实验室”:查文献、找想法、检查结果能否复现、分析是否稳健。

    “But answering questions is only half of the puzzle in science. The other half is figuring out what questions to ask.”James Zou
  2. 模型的答案太集中,类比推理把搜索推到别的领域

    让模型反复给一个科学问题出方案,前一两个很合理,之后多是同一批标准答案的小变体;他认为这和训练目标有关,模型因复现已有知识而得到奖励。他组的办法是让模型明确跳到很远的领域(物理、经济、社会科学),找关系结构相同的问题,再把那边已有的解法映射回来。他说这样得到的方案明显更多样,实际实现的几个也有很强的定量结果。

  3. 多样性和新颖性只是创造力的代理指标

    他说多样性和新颖性好量化,但只是代理:很多疯狂的想法里,有的疯狂而好,有的只是疯狂,分辨它们要靠判断,现有的评测和模型都抓不住。他提出的另一个办法是改训练目标:不看模型生成的一批方案平均多好,而看其中最好的一个多好,很多想法失败也可以接受。他说这一小改动在多个科学问题上得到更好的方案,有几处达到新的最好水平。

  4. 新的扩展方向是智能体的数量

    他说过去扩展的是单个模型的大小,现在可以扩展一起协作的智能体数量:从五到十个,到成千上万,最终可能上百万。他把自己实验室的路线排成这样:Virtual Lab 只有少数几个智能体,Virtual Biotech 有几十个,Physics of Agents 用统计物理去预测大批智能体互动时的群体行为。他认为新的集体智能和创造力会从这种互动里出现。

    “Rather than only increasing the size of an individual model, we can increase the number of agents collaborating with one another.”James Zou
  5. 智能体之间的社会动力学和单个智能体的能力一样重要

    提问者概括 Physics of Agents 的发现:反复互动会让智能体更坚定、走向共识,在数学题上提高准确率,在主观的政治表述上会放大偏见。Zou 说药物研发里很多好项目不是因为科学不成立才被砍,而是因为商业、专利、竞争格局或人的盲点。所以他测了团队里“怀疑者”的作用:在 Virtual Lab 里拿掉它,同一个团队犯的错明显更多。他也说前沿模型天生不擅长团队协作。

    “We found that a team without the skeptic often makes substantially more mistakes than the same team when the skeptic is added back.”James Zou
  6. 审稿分工:AI 查客观错误,人判断重要性

    他说投稿量暴增,现有审稿体系已难以为继。AI 擅长找技术错误、前后不一致和数字对不上;论文有多重要、多有创意、方向值不值得做,还是人类专家更强。Agents4Science 里,用同一套指令让 OpenAI、Anthropic 和 Google 的模型审同一批论文,OpenAI 的最挑剔、打分最低,Gemini 最正面,Claude 居中。他说现在很多人在私下用 AI 写稿审稿,有时还刻意隐瞒,需要公开透明的规范。

    “The OpenAI model tended to be the most critical and skeptical, and often gave the lowest scores.”James Zou
类比推理的做法,按他的描述和预印本摘要
  1. 看关系,不看对象把问题写成对象之间的关系。太阳系和原子的对象完全不同,有些关系结构却能对上。
  2. 去远的领域找同构的问题原问题在生物学,就让模型去物理、经济或社会科学里找关系结构相同的研究,哪怕名称和概念完全不同。
  3. 把那边的解法搬回来,再实现问那个领域已有的解法能不能映射回原问题;预印本在四个生物医学问题上实现了这样得到的方案。
02

改变了什么

  • 此前的公开记录

    这次对话之前,时间线上没有 Zou 实验室的条目:没有 Virtual Lab(《自然》,2025 年 7 月),也没有 Agents4Science 或两篇预印本;最早的两条是之后的 Paper2Agent(9 月 16 日)和 Virtual Biotech(9 月 17 日)。记录里的多智能体科研系统是 Google 的 co-scientist:2025-02-19 预览,2026-05-19 发表于《自然》。

    这次访谈新增

    Zou 把自己实验室的几套系统排成一条线:五到十个智能体、几十个、成千上万,并把“协作的智能体数量”提为和模型大小并列的扩展方向。

  • 此前的公开记录

    Physics of Agents 预印本(2026-08-17)研究了一万多个智能体社群,报告互动在数学题上提高集体准确率、在政治表述上让群体意见向右漂移;它讲的是群体怎样收敛,没有测团队里某个角色的作用。

    这次访谈新增

    Zou 给出两条没有数字的结果:Virtual Lab 去掉怀疑者后错误明显增多;在组织研究的团队协作练习上,AI 团队常比人类团队差得多。

  • 此前的公开记录

    时间线 3 月 25 日记录 Sakana 的 AI Scientist:三篇完全由 AI 写的论文中,一篇通过了研讨会的人类首轮评审。Agents4Science 报告(arXiv,2025 年 11 月)写明三个模型审稿人在 1 到 6 分上的平均分:GPT-5 2.30,Gemini 2.5 Pro 4.23,Claude Sonnet 4 3.0;和人类评分最接近的是 GPT-5 与 Claude。

    这次访谈新增

    Zou 把这个差别读成模型各自的默认性格,并由此提出审稿分工:AI 查客观错误,人判断重要性和创意;他还要求公开 AI 在写稿审稿里的用法。

03

为什么重要

搭智能体团队的人:质疑者和分工是要测的设计选择

如果拿掉一个怀疑者就让错误明显增多,团队里放哪些角色、谁能否决,就和选哪个模型一样要做对照实验。他引用的这项对照来自只有几个智能体的 Virtual Lab;对规模大得多的 Virtual Biotech,Bravo-Abad 读完论文后说没有拿掉审稿智能体的对照。

期刊和会议:选哪个模型审稿会改变分数

Agents4Science 的数字里,同一批论文换一个模型审,平均分可以差将近两分(满分 6 分),Gemini 与人类评分的平均差距是 2.73 分,报告还举了它吹捧论文的例子。所以要让 AI 进审稿,得先定它管哪一块:Zou 的答案是客观错误,报告里的例子是对不上的数字和前后矛盾的结论。

药物研发:想法变快,最慢的一步没动

他说初创公司更快用上 AI,但药物研发最难的往往是在人身上证明安全有效,那要靠大药企的经验、资源和规模。按他的说法,智能体能更高效地给出好分子,却还只是起点。这是他的判断,访谈里没有数字。

04

主张与边界

主张谁的口径目前状态

模型因答好问题而得到奖励,没有因提出好问题而得到奖励;提问是人类专家仍占优势的地方。

受访者判断

他对训练方式的解读,没有给出测量。

反复让模型出方案,它多半退回到同一批标准答案的小变体。

公司自述

他组的预印本摘要把它量化为“模式坍缩”,基线方法给出新方案的比例低至 1.6%。

类比推理给出明显更多样的方案,实际实现的几个有很强的定量结果。

公司自述

预印本摘要:多样性指标提高 90% 到 173%,一半以上的时候给出新方案,在四个生物医学问题上实现,在两个寡核苷酸数据集上达到最好水平。只读了摘要,arXiv 预印本。

多样性和新颖性只是创造力的代理,好坏之别要靠品味和判断,现有评测抓不住。

受访者判断

他自己的观点。

把奖励从一批方案的平均水平改成其中最好的一个,在多个科学问题上得到更好的方案,有几处达到新的最好水平。

公司自述

他没有点名论文。他参与署名的 TTT-Discover 预印本(arXiv 2601.16175)摘要写的正是这种目标;其结果本页没有读。

协作智能体的数量是和模型大小并列的新扩展方向,可以从五到十个扩到成千上万,最终上百万。

受访者判断

他这里说 Virtual Biotech 有“几十个”智能体;时间线 9 月 17 日记录的《科学》论文最多分配 37,000 个,按 Bravo-Abad 的读法是一个首席科学官、八个 AI 科学家和四个部门在调度大批单项任务智能体。

在 Virtual Lab 里拿掉怀疑者智能体,同一个团队犯的错明显更多。

公司自述

没有给出数字;Virtual Lab 的《自然》论文只读了摘要,没有核对论文里是否有这项对照。

在组织研究和商学院给人做的团队协作练习上,AI 团队常常比人类团队差得多。

公司自述

他只说“最近的一些工作”,没有点名论文、练习或分数。

AI 审稿擅长找技术错误、不一致和数字对不上,在重要性和创意上较弱。

受访者判断

Agents4Science 报告举了模型审稿人抓到数字不符和前后矛盾的例子,但没有给出抓错率。

同样指令下,OpenAI 的模型最挑剔、打分最低,Gemini 最正面,Claude 居中。

公司自述

和 Agents4Science 报告一致:1 到 6 分上 GPT-5 平均 2.30,Gemini 2.5 Pro 4.23,Claude Sonnet 4 3.0;与人类评分的平均差距分别是 0.91、2.73 和 1.09。报告全文已读。

投稿量的增长已让现有同行评审难以为继。

受访者判断

没有给出投稿数字。

以结果为目标的科学(比如一种药),只要证明安全有效,不完全理解机制或 AI 怎样得出它,也可能可以接受。

受访者判断

他的观点;他说出于好奇的科学恰恰相反,理解推理过程才是目的。

初创公司更快用上 AI,但药物研发最难的是在人身上证明安全有效,那里大药企的经验和规模更重要。

受访者判断

他的判断,没有给出数字或例子。

每位研究者背后都有一个虚拟实验室。

目标

他说的愿景,没有时间、计划或规模。

能连续几个月闭环做研究、不只是几个小时或一个项目的虚拟实验室。

尚未闭环

他自己说还需要创造力、提出下一个问题、分工协调和互相批评,没有点名已经做到的系统。

05

接下来看什么

  1. 大规模智能体系统里,拿掉怀疑者或审稿智能体的对照有没有发表。

    会表现为 一篇论文给出有无质疑角色时的错误率,并重复运行多次,而不是一次性的案例。仍未解决 Bravo-Abad 2026-09-22 读完 Virtual Biotech 的《科学》论文和补充材料,说论文没有去掉审稿智能体的对照,每个案例只跑了一次;本页没有自己读这篇论文。
  2. AI 团队与人类团队做同一套团队协作练习的比较有没有发表。

    会表现为 一篇论文写明用了哪些练习、哪些模型、双方的分数。
  3. 类比推理得到的方案在作者自己的基准之外是否成立。

    会表现为 同行评审版本,或另一个团队实现了这样得到的方法并报告提升。
  4. 有没有期刊或会议按他的分工用 AI 审稿,并公布效果。

    会表现为 该机构自己的报告:AI 标出了哪些错误、人审改变了哪些决定、漏掉了多少。
  5. 有没有智能体系统连续几周或几个月闭环做研究。

    会表现为 一篇论文写明运行时长、智能体怎样分工、人介入了几次。
↳

采访之后

后来出现的、检验或限制这次说法的证据,以及日期已过的目标。

  • 八天后,他组的 Paper2Agent 发表于《自然》:把论文的代码、数据和流程变成智能体可调用的工具,复现了 AlphaGenome 和 Scanpy/TISSUE 的结果。这是他“虚拟实验室替研究者检查结果能否复现”的一个具体版本,但只覆盖论文里展示的几篇。时间线条目 →

  • Virtual Biotech 发表于《科学》:最多 37,000 个基于 Claude 的智能体标注了 55,984 项试验,发现靶向细胞类型特异基因的药物上市率高 48%。这是他“扩展智能体数量”的最大一例;它提出的肺癌方案只经专家纸面审阅,没有合成或测试,和他说的最难一步在人身上相符。时间线条目 →

  • Bravo-Abad 读完 Virtual Biotech 的方法和补充材料后指出:审稿智能体用的是系统里最弱的模型(Haiku 4.5),只能读不能重跑分析;论文没有去掉审稿者的对照,每个案例只跑了一次。所以 Zou 引用的怀疑者对照只来自小得多的 Virtual Lab。Discovery at Scale (Jorge Bravo-Abad) ↗

来源与读法

读于 2026.11.01 Decoding Bio 发布的书面问答全文(约 4,400 词,Pablo Lubroth 提问),通读;文中注明对话经 AI 按篇幅和清晰度编辑过,所以引文是编辑后的文字,不是逐字的口头原话。文中提到的 Agents4Science 报告读了全文,两篇预印本和 Virtual Lab 的《自然》论文只读了摘要。 打开原访谈 ↗