我认为举办一场“机器人奥林匹克”会非常有意思,也能用来规范、校准当下的炒作热度。尤其是如果参赛者事先完全不知道环境会是什么样子,并且有一部分任务是未知的。 在和这些机器人相处了大约六个月之后,我发现了一个不太光彩的秘密:它们几乎全部在泛化能力上遭遇灾难性失败。 因此,“微调(finetune)”这个词,是我会特别加粗、划重点强调的。 I think a robot Olympics would be very exciting to regularize the hype. Especially if the participants had no idea what the environment would look like and a portion of the tasks were unknown. One dark secret of these robots (after spending 6 mo), is almost all of them colossally fail at generalization. Hence "finetune" is the word I'd underline.
目录
观点原文
我认为举办一场“机器人奥林匹克”会非常有意思,也能用来规范、校准当下的炒作热度。尤其是如果参赛者事先完全不知道环境会是什么样子,并且有一部分任务是未知的。
在和这些机器人相处了大约六个月之后,我发现了一个不太光彩的秘密:它们几乎全部在泛化能力上遭遇灾难性失败。
因此,“微调(finetune)”这个词,是我会特别加粗、划重点强调的。
I think a robot Olympics would be very exciting to regularize the hype. Especially if the participants had no idea what the environment would look like and a portion of the tasks were unknown.
One dark secret of these robots (after spending 6 mo), is almost all of them colossally fail at generalization. Hence "finetune" is the word I'd underline.
ABAB AI 解读
1️⃣ “Robot Olympics”的真实目的不是展示能力,而是戳破泡沫
“规范炒作热度(regularize the hype)”这句话非常关键。意思是:别再用演示视频和特定场景骗自己了。
真正公平的测试必须满足两点:环境未知、任务部分未知
一旦做到这两点,95% 的“看起来很聪明的机器人”会立刻现原形。
2️⃣ 未知环境 = 对“泛化能力”的公开处刑
在 AI 领域,泛化(generalization) 是最高难度、也是最稀缺的能力。
已知环境 + 已知任务 ≠ 智能
未知环境 + 未知任务 ≈ 接近真正智能
这也是为什么:Demo 很震撼、商用极其困难
因为现实世界永远是未知环境。
3️⃣ “黑暗秘密”点破了整个行业的核心短板
“几乎全部在泛化能力上遭遇灾难性失败”
这是极重的一句话,含义是:不是表现差、不是偶尔失败而是结构性不成立
也就是说,这些系统不是差一点就通用,而是根本不具备通用性。
4️⃣ 为什么作者要特别强调“finetune”
这是全段话的技术核心。
微调(finetune)意味着什么?
能力不是内生的而是“场景拟合”的结果
换环境 ≈ 换模型
这说明当前机器人智能的本质仍然是:高维度的模式记忆,而非世界理解。
5️⃣ 这段话隐含的行业分水岭判断
作者其实在划一条非常清晰的线:
左边:微调、定制、Demo、单场景成功
右边:零样本、跨场景、自适应、真实泛化
真正的“通用机器人”,必须站在右边。
6️⃣ 对资本与创业者的真正警告
如果你的系统:
- 必须反复 finetune
- 必须预设环境
- 必须限定任务
那它不是“通用智能”,而是高成本自动化设备。
这两者的估值逻辑、扩展路径、护城河,完全不同。
一句话封顶
当机器人只能在你提前准备好的世界里表现良好时,它不是在理解世界,而是在背答案。
相关观点
- 每次回到 Tokyo,我都会再次意识到:一座城市的标准可以有多高——人、人文、文化、安全、住房。San Francisco 其实有着巨大的潜力。 东京就像是一座到处都是“subreddit”的城市。 Each time I go back to Tokyo, I am reminded how high the bar can be for a city: people, culture, safety, housing. SF has so much potential. Tokyo is like a city full of sub-reddits everywhere.Suhail Doshi · 2025/12/20
- 我投资组合里那些表现烂的股票,只差一个印度籍 CEO,就能变成十倍股了。 All the bad stocks in my portfolio are just one Indian CEO away from being ten baggersSuhail Doshi · 2025/12/09
- 每当你宣布一笔你尚未真正“靠成果赚来”的巨额融资时,你往往会用公众对你“作为弱者的加油支持”,去换取那些“有才华但更偏向风险厌恶的人”的加入。我很好奇,这种交换到底值不值得,价值有多大。 Whenever you announce a giant round of funding that you haven't yet earned, you tend to trade the public rooting for you as an underdog in favor of enticing talented but risk averse people. I wonder how much value there is in the latter.Suhail Doshi · 2025/12/09
- 要判断 AI 进步接下来会带来什么,一个方法是去观察那些“不是由研究人员制作的、有趣的 Benchmark(基准测试)” One way you can sense what’s coming next as a result of AI progress is looking at interesting benchmarks that aren’t made by researchers.Suhail Doshi · 2025/12/02