返回快讯

Dwarkesh Patel发布新一期约96分钟对谈,议题从“如何给递归自我改进找反方最强论证”一路谈到时间表

Dwarkesh Patel发布新一期约96分钟对谈,嘉宾为Thinking Machines首席科学家、OpenAI联合创始人John Schulman,Zyphra首席技术官Beren Millidge,以及Baseten模型训练负责人Charlie O’Neill。三人任职于相对可公开讨论的实验室,议题从“如何给递归自我改进找反方最强论证”一路谈到时间表。

开场被设成对抗题:若到2036年仍没有大规模改造世界的超级智能,最可能的技术原因是什么,战争、监管和政治冲击先排除。三人反复区分两类任务——可累积任务与非平稳任务。注意力、混合专家、GRPO一类发现一旦写下就可以被后来模型直接继承;律所助理这类工作则要不断吞进变动关系、隐性流程和本地知识。O’Neill给出刺耳推论:递归自我改进碰巧比当一名律师助理更容易。

中国实验室进度被单独拆开。Schulman指出,面向中国用户的路由与代理服务会收集并出售访问美国前沿模型(以编程为主)的流量,这套提示词分布对蒸馏几乎是现成教材。Millidge称前沿实验室向大型数据公司买数据,中国实验室同样能买;若数据重合,蒸馏就能把代际差距压住。他同时说中国侧会用线上交互做蒸馏,下一代模型直接吃掉上一代的部署轨迹。

自动化研究者如何训练、长程强化学习能否逼出通用智能,被放到同一条链上。Millidge认为完整闭环——模型自己决定数据、自己决定训练——才算递归自我改进,关键变量是还需要多少人类信息。环境可以难过任何人类,不等于轨迹蒸馏能越过教师上界。Schulman强调大量研究并不是在定义清晰的目标上爬山,而是把“模型该在何处变好”的直觉变成可验证设定。O’Neill把瓶颈指向Mercor及实验室内部团队能把强化学习环境复杂度扩到哪一步。

强化学习被重新解释。Patel提到一年前学界普遍看空强化学习扩展,Schulman本人论文里写过模型每个回合大约只学到一比特。Millidge把近期成功拆成被低估的中期训练:大量所谓强化学习胜利,其实来自合成推理数据和热身环境,等于在进强化学习前又做了一轮预训练。模拟到真实的落差、持续学习中的灾难性遗忘与可塑性损失,被列为长程判断和目标设定仍要人来做的原因。快速问答里,把模型当成可替换白领远程员工、或把人工智能研究效率提高一个数量级的时间表,被收在大约2到10年;Schulman对更强智能给出3到4年量级判断。

市场机制上,这是一场叙事交易而非即时订单。买盘是押注递归自我改进、愿意把算力从推理回流训练的前沿实验室与其云厂商;卖盘是仍靠人类研究员、数据采购和评测环境扩容的开源与中型训练栈。资金流向分两支:一支继续购买提示词分布、合成推理数据和强化学习环境;另一支流向能公开说话、降低信息不对称的“开源侧”人才品牌。受益方是Thinking Machines、Zyphra、Baseten这类可以上镜讨论路线图的公司,以及靠蒸馏追赶的后发实验室;承压方是把递归自我改进当成已排进排期的闭源巨头叙事,以及无法把非平稳真实工作写成可扩展奖励的应用层买家。事件驱动来自对谈本身:它把“RSI是否近在眼前”从口号改写成可证伪的任务分类。

节目标题定为《AI researchers debate how close we are to recursive self-improvement》,时间戳覆盖反方论证、中国实验室、自动化研究员训练、长程强化学习、模拟到真实、数据贡献比例、强化学习为何生效、AlphaGo第37手与熵崩塌,以及快速时间表。正片可在视频平台观看,文字稿同步放出。

来源:公开信息

ABAB AI 解读

John Schulman的路径是把强化学习从论文送进产品再送进新公司。他在OpenAI联合创立并主导RLHF,那套流程直接变成ChatGPT的对齐底板;随后离开,出任Mira Murati创办的Thinking Machines首席科学家,继续把后训练当成可售卖的研究组织能力,而不是实验室内部工具。Patel此前已单独访过他讨论推理、RLHF与2027年通用智能计划。此人反复出现的行为模式是:先把样本效率写进论文(每回合约一比特),再在产品侧用规模把这条看起来不经济的曲线拉直。

资本没有流向“再造一个闭源巨头”,而是流向可对外说话的训练权。Zyphra押开源模型与中期训练数据;Baseten把模型训练和推理部署做成可卖的基础设施;Thinking Machines则把前OpenAI后训练班底重新打包。动机很具体:闭源实验室不能把路由数据、蒸馏来源和强化学习环境复杂度讲清楚,开源侧反而能把“提示词分布才是蒸馏上限”说成行业常识。中国实验室被描述为同一条采购链上的竞争买家——买数据、买流量、买教师模型输出——而不是另一套科学。

类比要落到AlphaGo第37手与熵崩塌,而不是空泛的奇点故事。DeepSeek与Kimi被点名为按真实使用改架构,而不只是压预训练损失,路径接近当年用自我对弈越过人类棋谱,但这次教师是美国前沿模型的编程流量。行业阶段是控制而非单纯扩张:算力仍在变大,但竞争变量改成谁能把非平稳工作写成环境、谁能避免持续学习里的遗忘。O’Neill把“递归自我改进比律师助理容易”说破后,位置就清楚了——实验室在攻可累积的研究闭环,市场仍在买做不完的本地流程。

结构判断是定价权转移。过去定价权在模型名字和参数量,这期对谈把定价权转到提示词分布、中期训练语料和强化学习环境的复杂度。机制是:蒸馏只能追到教师轨迹的上沿,环境才能高于人类;谁掌握真实用户提示和可验证长程奖励,谁就能决定后发实验室追一年还是追一代。数据解释了相当一部分代际提升,所以“买到同样的数据就能跟上”成为可执行策略,资本集中因此被蒸馏部分拆开,而不是被监管拆开。

ABAB News · 认知定律

  1. 可累积的进步像复利,非平稳的工作像现金

  2. 教师模型的流量,就是后进者的教材

  3. 闭环比口号先完成,助理工作比智能先卡住