四家大厂同一天,给网站写了一行拒绝令
2026 年 10 月 30 日,四家公司共同支持共享政策标记 __usage_ai-training,网站在 robots.txt 里写一次,即可表达拒绝生成式 AI 训练的意愿。
- 01THE DRAFT:2026 年 10 月 30 日,Kevin Kelley 向 IETF 提交个人草案。
- 02THE TOKEN:标记名为 __usage_ai-training,写在 robots.txt 里。
- 03THE SPLIT:Anthropic 已开始,微软定 2027 年 2 月 1 日,谷歌目标 2027 年。
WHAT HAPPENED发生了什么
信号的写法很短。网站在 robots.txt 里写 User-Agent: __usage_ai-training,再写 Disallow: /,也可以用 Allow 行为个别路径留出例外。这个标记来自 Anthropic 标准负责人 Kevin Kelley 提交的 IETF 个人草案,标题是 Machine-Readable Training Preference Signal,草案日期同样是 2026 年 10 月 30 日。
四家公司的落地时间表并不一致。Anthropic 表示已经开始实施,OpenAI 说会在未来几个月内实施,微软定在 2027 年 2 月 1 日起按抓取逐步生效,谷歌只说目标在 2027 年。微软还另外给出训练与 grounding 的分开控制, grounding 指模型回答时引用实时网页内容,不是训练权重。
这个信号有两个硬边界。第一,它只管生成式 AI 训练,不改变普通搜索收录,谷歌与微软都明确说了这一点。第二,它不是正式标准,个人草案没有 IETF 背书,2027 年 5 月 3 日到期前需要修订或采纳。已经收进数据集或训进模型的内容,也不会因为新写一行指令就被删掉。
ONE TOKEN, FOUR READERS统一写法,解决的是重复劳动
过去网站要一家一家写规则,GPTBot、ClaudeBot、Google-Extended 各有名字。现在一个标记可以被四家同样理解,站长的工作量从四份变成一份。
统一的代价是等待。标记写进文件不等于立刻生效,真正生效要看各家抓取与实施的进度,旧的单家规则在过渡期仍然管用。
THE MISSING SIGNATUREMeta 没有签字,是这轮最大的缺口
Meta 公开欢迎统一信号的想法,但没有确认自己的爬虫会遵守。全球最大的内容平台之一不在承诺名单里,统一信号的覆盖面就打了折。
对出版商来说,信号的价值取决于缺席者会不会跟进。如果 Meta 长期不跟进,网站还是要为它单独留一套规则。
NO RETROACTIVE DELETE拒绝训练,不等于删除历史
信号只表达未来的训练偏好。已经收集的数据与已经训好的模型不在它的管辖范围,出版商不能靠它追回历史使用。
法律纠纷仍在继续进行。印度出版商与 OpenAI 的诉讼就是背景之一,技术信号解决的是流程问题,不是权利归属问题。
SIGNAL JUDGMENT统一信号值得写,但别指望它立刻管用
Tokenta Signal 的判断不变:网站应该现在就把这行写上,成本只有一行。真正决定它有没有用的是抓取生效的进度与缺席者的跟进,这两件事都要按月复查。
WHAT REMAINS UNCERTAIN还有什么不确定
EVIDENCE证据
原文确认四家公司 2026 年 10 月 30 日共同支持共享标记,标记名为 __usage_ai-training,Anthropic 已开始实施,OpenAI 在未来几个月内,微软 2027 年 2 月 1 日起,谷歌目标 2027 年。
PRIMARY SOURCES原始来源
- AI Weekly:OpenAI, Google, Microsoft, Anthropic Back One AI Opt-Out Token
https://aiweekly.co/alerts/openai-google-microsoft-anthropic-back-one-ai-opt-out-token - PPC Land:Google, Microsoft, OpenAI and Anthropic back one AI training opt-out
https://ppc.land/google-microsoft-openai-and-anthropic-back-one-ai-training-opt-out/