操盘手年鉴The Operators’ Almanac
AI · IN · 100

机器人苦涩教训失效

Bitter Lesson Fails For Robotics · bitter-lesson-fails-for-robotics--dr-fei-fei-li
AI 与新工作方式 洞察 AI 时代 2025-11 Dr. Fei-Fei Li ✓ 已核验出处

解决什么问题

"Bitter Lesson"(Richard Sutton 提出:更简单的模型 + 更多数据,长期总是打败更复杂但数据更少的模型)已经成为 AI 界的默认信条,很多人假设机器人领域只要复制"砸数据 + 通用模型"这套打法就能复制语言模型的成功。这张卡解释为什么这个假设对机器人不成立(或者说:至少现在还不成立)。

核心内容

Dr. Fei-Fei Li(做视觉智能/机器人研究出身)指出机器人领域和语言模型有两个本质性差异,导致"单靠 Bitter Lesson"走不通:

  1. 目标函数与训练数据之间缺乏语言模型那种"完美对齐":语言模型的训练数据是词/token,输出也是词/token——训练目标和数据形式天然一致。而机器人的目标函数是"三维世界中的动作(action)",但现成的训练数据(互联网视频等)里恰恰缺少"三维世界中的动作"这个维度——"你不得不把方形塞进圆孔",只能靠遥操作数据(teleoperation data)、合成数据等方式勉强补足,这些补丁本身还不成熟。
  2. 机器人是物理系统,更接近自动驾驶汽车而非语言模型:不仅需要"大脑"(算法/数据),还需要物理躯体、真实应用场景的产品化落地。作者用自动驾驶的历史做参照——她的同事 Sebastian Thrun 在 2005 年带领斯坦福车队在 DARPA 挑战赛完成 130 英里沙漠自动驾驶原型,到今天 Waymo 在旧金山街头运营,走了近 20 年,而且"还没完全做到";自动驾驶还只是"2D 平面上跑的金属盒子、目标是不碰任何东西"这种相对简单的机器人,通用机器人则是"在三维世界里运动、目标恰恰是要去接触和操作物体",复杂度更高一个数量级。
  3. 产业化的配套要素也需要独立成熟:自动驾驶除了"用深度学习加速大脑"这一层进步外,还依赖成熟的整车产业链、供应链、量产用例,这些配套本身也需要漫长时间搭建,机器人领域这些配套目前更不成熟。

作者的结论并非"Bitter Lesson 是错的",而是"数据这一环在机器人领域还没被解决,所以 Bitter Lesson 在这里还有待验证(yet to be tested)"。

适用边界

  • 该判断针对"通用机器人/具身智能"这一细分领域,不否定 Bitter Lesson 在语言、视觉等有大规模自然数据的领域依然成立(作者本人正是靠"押注大数据"缔造 ImageNet 突破)。
  • 作者本人也在押注"世界模型能解锁机器人所需的合成数据",即她认为长期看 Bitter Lesson 仍可能在机器人领域成立,只是当前阶段数据基础设施尚未就位。

关键引述 · 原话

"You hope to get actions out of robots, but your training data lacks actions in 3D worlds, and that's what robots have to do... you have to find different ways to fit a square in a round hole." — Dr. Fei-Fei Li

"Robots are physical systems. So robots are closer to self-driving cars than a large language model." — Dr. Fei-Fei Li

关联卡片

- 与 bet-on-the-general-model--boris-cherny 形成对照:后者是"押注通用大模型"在软件/agent 领域的成功应用,这张卡说明同一原则在机器人这类物理系统领域为什么还不能简单复制。 - 与 ai-cad-gap-no-codex-for-hardware--caitlin-kalinowski 主题呼应:都指向"物理世界任务缺乏语言/代码那样干净的数据接口"这一更大瓶颈。

被这些卡引用

出处Dr. Fei-Fei Li (World Labs 联合创始人/CEO) · 03-podcasts/dr-fei-fei-li.md
提炼自 Lenny Rachitsky 的 Lenny’s Newsletter & Podcast(2019–2026)。本站为个人学习用途的二次创作,与 Lenny’s Newsletter 无官方关联。
provenance · 已核验 · glm-5.2