“约 5%”决定验证器该建多大
如果便宜能验证的只有约 5%,用模拟器训科学模型就碰不到大部分问题,这就是 Lila 建实验室而不是只做模拟的理由。但这个数字是大模型对文献的估计,不是测出来的;它是一个论点的前提,不是结果。


AI FOR SCIENCE · 访谈
Lila 的 CTO 说,强化学习要接着长大,缺的是能验证的领域;科学是最大的一块,但便宜能验证的只占约 5%,所以 Lila 在建一个把真实实验当验证器的“AI 科学工厂”。
七月的访谈没有的数字:约 5% 的估计、一个量子点设计闭环(约 90 分钟一轮,基座模型准确率 12.5%)、后训练算力从 10^19 到 10^23 FLOPs 的内部 scaling 曲线、年底前上到一万亿参数,以及体内 CAR-T 的成本:几百万美元做到 IND 的程度,对比此前最好水平的五年、一亿美元(约六个月这一点七月已经说过)。
全部是 Lila 自己的说法:5% 来自大模型对文献的估计,scaling 曲线用的是内部基准,量子点对比没有说明任务集和对照模型,CAR-T 的成本对比没有点名比的是哪个项目。
Beam 的说法:先靠互联网数据预训练,大约两年前起靠带可验证奖励的强化学习继续放大;数学和代码这类检查便宜的领域已经基本用满,问题是怎么进入验证很难的领域。他说科学像一台“无限的 token 发生器”,永远能提新假设、产生新数据,前提是有人造出验证科学假设的东西。
“how do we start to tackle domains when verification is hard?”Andrew Beam他拿一个开放的文献索引,让大模型估计其中多少假设能用模拟器或计算工具在一小时内验证,得到约 5%,并说误差范围很宽,但和科学家聊的话数量级会被认同。由此推出:绝大部分科学必须真做实验,所以要建一个大验证器。
“the vast majority of science is actually dark matter for reinforcement learning with verifiable rewards because we can't verify it cheaply.”Andrew Beam他把“AI 科学工厂”拆成智能层、包住实验室的软件层和机器人。实验室里多数设备默认操作者有对生拇指,自动化里看着难的(单位时间收很多数据点)反而容易,拧开试管盖这种事很难。他们在剑桥有 15,000 平方英尺的实验室,把它当数据中心而不是传统实验室;2027 年初在红线终点附近再开 10 万平方英尺。
任务是设计在指定波长发光的量子点(红色约 650 纳米,蓝色低于 500);模型能选的动作是反应前体试剂,96 孔板上自动配液、摇动、让纳米晶体长出来,再测发光颜色,整套约 90 分钟,视频里做出了从绿到红的量子点;量子产率也是可以优化的目标。从开放权重的基座模型出发,用 SFT 加强化学习训练:基座准确率 12.5%,后训练后他说超过了前沿模型。这是和英国政府合作的“AI 纳米科学家”项目,结果来自上一代技术栈。
他说量子点、电催化剂、蛋白都应进同一个模型,专业化拿不到只有扩大范围才有的涌现能力。横轴是后训练算力,从 10^19 到 10^23 FLOPs,纵轴是内部基准:几千个科学任务(每个 100 到 10 万个提示)的平均奖励;他们从去年底开始做,说看到算力和“科学智能”之间有稳定的关系,并计划到今年底把模型放大到一万亿参数。
时间线上没有 Lila 的量子点或任何 scaling 的条目;本站七月的访谈页只讲实验室是模型的验证器,没有给出模型随算力变化的任何数字。
Beam 给出一条内部曲线(后训练 10^19 到 10^23 FLOPs,几千个科学任务的平均奖励)和一个量子点设计闭环(基座 12.5%,后训练后超过前沿模型);基准、任务集和对照模型都没有说明。
七月的访谈页记录体内 CAR-T 是两三个人约六个月做出非人灵长类数据,一直做到“可以考虑提交 IND”的程度,并记录 Lila 不会提交 IND 或做临床;时间线上没有 Lila 的 CAR-T 条目。
时间点和七月一致:约六个月做到 IND 的程度,是一个临床前资产,Lila 不是体内 CAR-T 公司。新的是成本:几百万美元,对比他称为此前最好水平的五年、一亿美元;比的是哪个项目没有说。
时间线上没有 Lila 的催化剂条目;七月的访谈页只记录嘉宾说模型起初低置信度的建议成了他们最好的非铂族催化剂,没有数据。
演讲(8 月在大会上讲,9 月 17 日发布视频)把电催化项目讲成“非铂族金属”的催化剂,说做到约铂族催化剂水平、成本低约一万倍;比较的基准没有说。
如果便宜能验证的只有约 5%,用模拟器训科学模型就碰不到大部分问题,这就是 Lila 建实验室而不是只做模拟的理由。但这个数字是大模型对文献的估计,不是测出来的;它是一个论点的前提,不是结果。
Lila 押“一个模型装下所有科学”,Radical 押自己的合金数据,Periodic 押多种实验室的完整轨迹。要判断谁对,需要同一批任务上通用模型与专用模型的对照;这场演讲里有曲线,没有对照。
听众是 Ray 的使用者,演讲讲的是算力和平台。CAR-T 的成本对比、一万倍的成本差、量子点胜过前沿模型,都是台上一句话,没有论文、公告或外部数据;在它们出现之前,读它们为 Lila 对自己路线的说法。
便宜能验证(模拟器或计算工具,一小时内)的科学假设约占 5%。
受访者判断
Beam 让大模型在一个开放文献索引上估出来的,他自己说误差范围很宽;没有给出方法细节。
量子点设计闭环约 90 分钟一轮,全自动,团队成员可以远程下单;做出了从绿到红的量子点。
当前自动化
Beam 的描述并放了实验室视频;视频只显示工作站在运行。
基座开放权重模型在量子点设计任务上准确率 12.5%,后训练后超过前沿模型。
公司自述
来自上一代技术栈;没有说明任务集、评分方式和对照的前沿模型。
后训练算力从 10^19 到 10^23 FLOPs,内部基准(几千个科学任务的平均奖励)与算力之间有稳定关系,称为科学智能 scaling law 的雏形。
公司自述
内部基准,没有公开任务、评分和留出集;曲线只读到他口头所讲。
体内 CAR-T:约六个月、几百万美元做到 IND 的程度(一个临床前资产),此前最好水平约五年、一亿美元。
公司自述
没有数据,也没有指明比较对象。约六个月与七月访谈一致:Beam 当时说做到“可以考虑提交 IND”的程度,Lila 不会提交;成本数字是新的。Lila 自己 2026-08-28 的文章说研发成本约低十倍,Anyscale 的大会回顾写成非人灵长类有效性、成本约低 30 倍。
设计了临床特性比现有产品更好的 mRNA 疗法(更少剂量、更少免疫原性反应)。
公司自述
演讲本身没有给数据。Lila 自己 2026-08-28 的文章给了细胞里的数字:EPO 的 mRNA 第 15 天的蛋白产量与参照序列第 2 天相当,另外五种蛋白的 mRNA 半衰期也更长,比的只是公开的参照序列;剂量和免疫反应没有数据。
非铂族金属电催化剂做到约铂族催化剂水平,成本低约一万倍。
公司自述
没有数据;比较基准未说明;2026-09-24 的时间线条目里最优材料主要是钯,本身是铂族金属。
计划年底前把模型放大到一万亿参数;2027 年初开 10 万平方英尺的新设施。
目标
目标。
所有领域的知识应放进同一个模型,专业化拿不到只有扩大范围才有的涌现能力。
受访者判断
Beam 的看法;没有通用与专用的对照。
自动化科学实验室很难,因为它同时汇集了科学、软件和后训练里的难题。
尚未闭环
Beam 自己明说。
那条 scaling 曲线有没有用公开的任务和留出集再画一遍。
会表现为 Lila 或外部方发布的基准,写明任务、评分方式和留出集,曲线可复现。量子点任务上,后训练模型对前沿模型的并排结果。
会表现为 写明任务集、评分方式和对照模型名称的结果。这个 CAR-T 临床前资产有没有点名,并由合作方推进到 IND;Lila 说自己不会提交。
会表现为 Lila 或合作方公布的具名资产与数据,或合作方的 IND 受理文件。万亿参数的模型有没有发布,并写明训练算力。
会表现为 Lila 的发布,写明参数量、训练算力和评测。核查日 原话:到今年年底电催化剂的成本比较基准,以及最优材料里没有铂族金属。
会表现为 论文或公告里写明比较对象、成本口径和材料组成。已有第一条证据 arXiv 2609.30133(2026-09-24)写明了对照和组成:最优的 InMnPdOx 含钯 99.91%,钯是铂族金属;最好的无铂族对照 CoFeZrOx 起始过电位约差 90 mV,钴锆氧化物在酸中不到 4 小时失效。论文没有给成本口径。10 万平方英尺的新设施有没有按时开张,并说明里面跑的是哪些实验。
会表现为 Lila 或当地的公告,写明开张日期和设施里的工作流。核查日 原话:2027 年初后来出现的、检验或限制这次说法的证据,以及日期已过的目标。
Lila 报告无铱析氧催化剂:53 个体系、2,942 种氧化物里筛出的 InMnPdOx,金属成分 99.9% 是钯,在酸中过电位低于 0.5V 稳定超过 1,000 小时。这是 Lila 平台公开的一个电催化结果;最优材料主要是钯,论文也没有给成本口径,所以它没有检验演讲里“无铂族、成本低一万倍”的说法。论文里最好的无铂族对照 CoFeZrOx 起始过电位约差 90 mV,这类钴锆氧化物在酸中撑不到 4 小时。时间线条目 →
读于 2026.10.03 整场演讲的完整文字稿,通读。这是 Beam 在 Anyscale 自己的 Ray Summit(2026 年 8 月 24–26 日,旧金山)上的主题演讲,视频 9 月 17 日发布;Beam 感谢 Anyscale 在扩大 Lila 训练算力上的合作,Anyscale 的视频简介也说模型是在 Anyscale 上训练的,所以这是公司在合作方的大会上讲自己;演讲里的图表和视频只读到他口头讲的部分,没有看到幻灯片上的原始数据。 打开原访谈 ↗