Anthropic 哀叹蒸馏技术的美妙讽刺
Anthropic 公司抱怨其 AI 模型被竞争对手通过"蒸馏"技术复制,这本身是一种讽刺,因为该公司早期曾受益于类似的开源研究和方法。文章指出,这种抱怨忽视了蒸馏在推动 AI 民主化和创新中的积极作用。
背景速读
- Anthropic 是 OpenAI 前员工创立的 AI 安全公司,主打"负责任的 AI",Claude 是其核心产品。
- "蒸馏"(distillation)指用大模型(如 GPT-4)的输出去训练小模型,是一种常见且低成本的技术,小公司常靠此追赶头部玩家。
- Anthropic 近期公开批评蒸馏行为,认为这侵犯了其服务条款、损害了模型安全——但讽刺在于:Anthropic 自己早期大量使用 OpenAI 的 API 输出来训练 Claude,本质上干的也是同一件事。
- 这篇推文点出了行业里的双重标准:当大公司抱怨被蒸馏时,它们自己往往也是靠蒸馏起家的。