操盘手年鉴The Operators’ Almanac
AI · IN · 348

AI 产品即数据管理

AI Value Is Data Management · ai-value-is-data-management--shaun-clowes
AI 与新工作方式 洞察 过渡期 2024-12 Shaun Clowes ✓ 已核验出处
所属簇 模型技术素养

解决什么问题

团队做 AI 产品时把注意力全放在模型和 prompt 上("接个模型、搭个小 pipeline 灌点数据就行"),结果长期陷在效果差的泥潭里。Shaun 的 hot take:AI 对产品的最大影响是数据管理

核心内容

基本判断:LLM 是"合成机器"(synthesis machine)、"无限的信息吞噬者"——但它只知道训练时的内容和你此刻喂给它的内容,一毫秒后就忘。所以 LLM 的上限 = 你给它的数据的质量 × 新鲜度。给得越多越好(大体如此)。

信息衰减率:任何信息(客户反馈、竞品动作)对决策的价值都衰减得非常快。所以喂给 LLM 的数据不仅要多、要好,还要及时

价值分层(做 AI 产品时)

  • 模型:大概率可替换,不是差异化来源
  • Prompt:有价值,值得持续投入,但不是根本
  • Context/数据:真正的答案。90% 的力气(calories)花在这里——如何拿到好数据、高质量数据、及时数据、结构良好的数据,并送到 LLM 面前

例子(HCM bot 思想实验):假如在 Workday 做 AI 助手,聪明程度取决于:员工信息 + 福利信息 + 该员工所在国家的法律现状 + 公司政策流程——这些数据的链接与跳转,而不是模型本身。

佐证(Lenny 转述 Mike Krieger 在 Anthropic 的经验):Anthropic 内部两类产品团队——做用户体验的和做模型研究侧的——复盘发现成功几乎都来自模型/数据侧的工作,于是把更多产品人力压到那一侧,而不是调 UX 和按钮。

给创业者的推论:有第一方数据但用不上=没用;数据到处都是,稀缺的是"对的数据、对的时间、对的位置";能形成第一方数据网络效应最佳。

适用边界

  • "模型可替换"的前提是通用能力持续商品化;若你的场景依赖前沿能力则模型选择仍重要
  • "90% 力气在数据"描述的是企业内落地 AI 与在产品中嵌入 AI 的场景,不是基础模型研发本身

关键引述 · 原话

Shaun Clowes: "LLMs can only be as good as the data they are given and how recent that data is."

Shaun Clowes: "It's a data management problem... That's where 90% of the calories go."

关联卡片

- llm-disconfirmation-research--shaun-clowes:PM 工作流侧的同一原理 - business-rules-are-the-moat--shaun-clowes:数据/规则视角看 SaaS 护城河

被这些卡引用

出处Shaun Clowes (Confluent, CPO; ex-Salesforce/MuleSoft, Atlassian) · 03-podcasts/shaun-clowes.md
提炼自 Lenny Rachitsky 的 Lenny’s Newsletter & Podcast(2019–2026)。本站为个人学习用途的二次创作,与 Lenny’s Newsletter 无官方关联。
provenance · 已核验 · glm-5.2