AI · IN · 423
AI生成内容模型崩溃
AI Generated Content Model Collapse · ai-generated-content-model-collapse--ethan-smith
所属簇 AI 时代增长与分发
解决什么问题
判断"用 AI 100% 自动生成内容、无人工把关"这条路径到底能不能在搜索/AEO 里长期奏效,并理解为什么"内容行业整体转向 AI 生成"这件事本身存在系统性自我毁灭的逻辑陷阱。
核心内容
Ethan Smith 团队做了一项严谨研究来验证这个问题,方法是:用经过验证的 AI 内容检测器(先用生成内容和 Common Crawl 历史真人内容做校准,误报率约 8%,判定其足够准确),分别检测 Google 搜索结果页和 ChatGPT 引用来源的内容构成。
核心发现:
- 纯 AI 生成内容目前并不能赢:Google 搜索结果中约 10%-12% 是 AI 生成,ChatGPT 引用来源中约 90% 不是 AI 生成——相关性分析也印证了同一结论。人工辅助(AI-assisted,人类编辑把关)的内容会继续是主流,但 100% 无人把关的 AI 生成内容效果不好。
- 意外发现——全网 AI 生成内容占比已超过人类原创内容:对过去五年 Common Crawl 十万个 URL 抽样分析显示,AI 生成内容比例已经反超人类创作内容。
- "如果 AI 内容真的有效,系统会自我坍缩"的推演:作者用 2007 年 programmatic SEO/spam 的亲身经历做类比——当年他和同行靠"互相抓取内容、拼凑重组"做出上亿张自动页面,一度奏效,随后被 Google 算法(Panda 等)连根拔起,整个品类的公司随即消失。作者判断同样的事会发生在 AI 生成内容上:如果它真的有效,所有人都会去做,内容会迅速从"大部分是 AI 生成"滑向"几乎全部是 AI 生成";届时 Google 本质上会变成"给 ChatGPT 生成内容做索引的搜索引擎",其存在的意义就会消失(正如 2007 年 Google 直接砍掉比价网站品类,自己做电商结果一样)。
- "衍生物的衍生物"导致的 wisdom-of-crowd 崩塌(对应学术界的 Model Collapse):作者团队进一步测试——如果不断把 AI 生成内容喂给 RAG、再让 LLM 总结这些总结、循环往复会发生什么。结论是:LLM 本质是在总结"群体智慧"(例如"最好吃的冰淇淋口味是什么"本应有成千上万种真实意见,取平均往往比单一最佳个体的判断更好);但一旦不断递归总结衍生内容,多样性会持续收窄,最终收敛到单一"标准答案"(例子:最终只会说"是香草,而且只有香草"),丧失群体智慧本该提供的多样性和准确性。这与学术界关于"用模型自身生成数据训练核心模型会导致模型崩塌(Model Collapse)、产生大量幻觉"的研究结论相呼应,只是这里验证的是 RAG 检索层而非核心模型训练层。
适用边界
- 该研究针对当前一代 AI 检测器和当前一代 LLM+RAG 架构,检测器本身存在约 8% 的误报率,不是 100% 精确。
- 结论明确区分"人工辅助编辑的 AI 内容"(作者认为这是内容的未来,效果好)和"100% 无人把关的自动生成内容"(效果差),不能一概而论地说"AI 写的内容都不行"。
关键引述 · 原话
"We essentially did a very rigorous study showing that AI content does not work. AI-assisted content edited is great." — Ethan Smith
"If you feed in derivatives of derivatives into the model, you'll basically take the wisdom of the crowd, and that will shrink, and you'll have a single opinion on everything, which is really bad." — Ethan Smith
关联卡片
- 与 traffic-concentration-pareto-landing-pages--ethan-smith 背景相同:都来自作者对"低质量规模化内容策略"的系统性怀疑。
被这些卡引用
出处:Ethan Smith (Graphite, CEO; 曾从事 2007 年代 programmatic SEO) · 03-podcasts/ethan-smith.md
提炼自 Lenny Rachitsky 的 Lenny’s Newsletter & Podcast(2019–2026)。本站为个人学习用途的二次创作,与 Lenny’s Newsletter 无官方关联。
provenance · 已核验 · glm-5.2
提炼自 Lenny Rachitsky 的 Lenny’s Newsletter & Podcast(2019–2026)。本站为个人学习用途的二次创作,与 Lenny’s Newsletter 无官方关联。
provenance · 已核验 · glm-5.2