操盘手年鉴The Operators’ Almanac
AI · IN · 265

验证即新瓶颈

Verification Is The New Bottleneck · verification-is-the-new-bottleneck--fiona-fung
AI 与新工作方式 洞察 AI 时代 2026-06 Fiona Fung ✓ 已核验出处

解决什么问题

当编码不再是瓶颈(Anthropic 工程师人均季度代码量已是 2021–2025 基线的约 8 倍;PM、设计师也在提交代码;绝大多数 commit 是 Claude 辅助的),团队的约束条件转移到哪里、该往哪里投资。

核心内容

核心论断:瓶颈从"写代码"转移到"验证"。吞吐量高 + 提交者学科多元(工程/PM/设计都在 checkin),如何让所有人对变更有信心成为第一问题。

可操作的做法:

  1. 把"什么是好"写成可校验的资产,checkin 进 repo:spec、content design 规范(做成 skill)等。Claude 在"给定框架去校验"这件事上非常强——有了 repo 里的 good-looks-like 声明,Claude Code review 就能自动验证代码是否仍符合当初意图。
  2. spec 与代码同步演进:spec 必须随代码频繁更新,否则校验资产失效。
  3. 人工审查收缩到深度专业领域:需要 subject matter expertise 的关键部位保留人类 reviewer,其余尽量自动化。
  4. TDD 的复兴:测试先行原则一直对,但过去写测试像"先吃西兰花"的税;现在测试生成自动化了,让 Claude 先写测试、确认失败、再修复——老原则因模型而变得更高效。
  5. 投资监控与测试胜过投资更多人工 review:速度已不可能靠人盯,转向"让 agent 知道成功长什么样,自己闭环"。

未解决部分(她自己的 caveat):如何验证"体验"符合预期——准确性可以 eval,但体验层面的 verification 还没被攻克。

适用边界

  • 数字基准(8x)来自 Anthropic 内部(免费 token、极高 AI 采纳度),别的团队应看趋势而非绝对值。
  • 自动化 review 的推进边界仍是开放问题:"how far do you push fully automated reviews" 是她列出的未解难题之一。

关键引述 · 原话

"Coding is no longer the bottleneck. It's lifted the ceiling of what anyone is able to do." — Fiona Fung

"Anytime you have a statement of what good looks like, get it into the repo and then Claude Code review can make sure it's still matching what you set out to do." — Fiona Fung

关联卡片

- bad-vs-sad-quality-framework--fiona-fung 是运行时侧的验证框架。 - ai-era-hiring-two-profiles--fiona-fung 中"深度系统专家"的职责正是这里的人工验证部位。 - 呼应 Boris Cherny(同播客系列)"coding is solved" 的说法。

被这些卡引用

出处Fiona Fung (Anthropic, Claude Code/Cowork 团队负责人) · 03-podcasts/fiona-fung.md
提炼自 Lenny Rachitsky 的 Lenny’s Newsletter & Podcast(2019–2026)。本站为个人学习用途的二次创作,与 Lenny’s Newsletter 无官方关联。
provenance · 已核验 · glm-5.2