拒绝AI训练只需一行？三大主流公司支持通用规则
機械翻訳 / Machine-translated
A
AI Friends
3日前・9分で読める
機械翻訳 / Machine-translated
@aifriends
AI Friends（https://aifriends.jp）のクロスポスト公式アカウント。AIツールの紹介・使い方・できることを、中学生でもわかるやさしい日本語で届けます。
"不希望自己的博客被用于AI训练"——有这种想法的人应该不少，但过去因为各家公司的设置方式不同，操作起来相当繁琐。2026年10月30日，主流AI企业宣布将支持一套减少这一麻烦的通用机制。
2026年10月30日，Google官方博客、OpenAI和Microsoft在同一天发布公告，表示将支持网站运营者用于拒绝AI训练使用的通用信号。
提出这一信号的是Anthropic的Kevin Kelley，已作为IETF（负责讨论互联网技术规范的组织）草案公开发布。
过去，拒绝Google需要写"Google-Extended"，拒绝OpenAI需要写"GPTBot"，每家公司都要单独设置。想拒绝5家公司就需要写5次。
有了通用信号，只需在一处写明即可传达意愿。
robots.txt是一个文本文件，用于告知自动巡查机器人（爬虫）哪些区域可以访问，大多数网站已经拥有这个文件。本次机制正是利用这一现有文件。
无需学习新语法。根据草案，沿用现有规则（RFC 9309）的写法即可。
使用__usage_ai-training作为策略令牌（表示用途的特殊名称）。拒绝整个网站被用于训练的示例如下：
User-Agent: __usage_ai-training
Disallow: /
也可以只允许部分内容。草案示例中，拒绝整个网站的同时，仅允许媒体资料页"/press-kit/"：
User-Agent: __usage_ai-training
Disallow: /
Allow: /press-kit/
这一信号是"希望不用于训练"的意愿表达，并不是停止爬取（巡查）本身的命令。限制爬取仍需按原来的方式，通过针对各爬虫的设置来进行。
此外，代表所有机器人的"User-Agent: *"设置并不适用于此名称。若未写入专用名称，则视为未表明意愿，请注意这一点。
各公司的支持进度存在差异：
也就是说，今天写下并不代表立即对所有公司生效。在此期间，需要同时保留现有设置和通用设置。
Microsoft官方博客说明，除训练之外，还将提供"Grounding（落地）"相关设置。Grounding是指AI在生成回答时，将你的页面作为信息来源进行读取。
训练是改变AI内部模型的使用方式；Grounding是每次提问时参考最新页面的使用方式。两者相似但并不相同。
Grounding可在页面级别从以下三项中选择：
如需在页面级别拒绝训练，可在HTML中写入：
<meta name="Bingbot" content="ai-training:disallow">
时间节点已确定：2026年12月15日起，Bing Webmaster Tools将开始临时设置，2027年3月1日为截止日期。此后，原有的NoArchive和NoCache将不再被视为训练及回答生成的意愿表达。
Microsoft警告称，拒绝Grounding将大幅降低在AI回答中的曝光度，但表示不影响Bing的搜索排名。
原有的Google-Extended和GPTBot是各公司的专属名称；新信号是不区分公司的"用途"名称，这是两者的重要区别。
但这并非替代关系。草案和各公司公告均表示，公司专属设置继续有效。如需针对各公司进行细化设置，仍可使用原有配置。
这一机制的背景是出版方的强烈施压。2026年7月，Cloudflare提出"AI爬虫要么付费要么被屏蔽"的方针。
这一变化同样影响日本的新闻网站、博客及企业媒体运营者。国内报社网站此前已通过robots.txt表明拒绝未经授权的训练使用。对于此前需要管理多条公司专属设置的负责人而言，工作量将有所减少。
举个例子，假设一家公司有10人共同运营内部博客，过去负责人需要"确认Google和OpenAI的设置，有新AI公司出现时再追加……"，现在只需放置一个通用名称即可传达基本方针。
对于个人博主而言更加简单，只需在WordPress的robots.txt中添加两行，即可向各公司表明"请勿用于训练"的意愿。
发布图片或插画的创作者则可按路径进行指定，例如仅指定存放作品的文件夹。同时请记住，已经训练过的数据并不会因此被删除。
关于对搜索结果的影响：本次信号仅针对训练，据说不会导致网站从Google或Bing的搜索结果中消失。
推荐操作步骤如下：
反之，如果希望自己的网站出现在AI回答中，则无需操作，默认状态为"允许"。
不会。Microsoft从2027年2月1日起，Google从2027年起，OpenAI在未来数月内，各公司支持时间不同，部分公司写了也不会立即生效。
请不要删除。各公司均表示现有设置继续有效。建议在原有设置的基础上添加通用设置。
不会。该信号仅针对训练，据说不影响Google和Bing的搜索结果。但如果拒绝Microsoft的Grounding，在AI回答中的曝光度将会降低。
不会。这一机制是针对未来使用的意愿表达，不保证删除过去已使用的数据。
还没有。目前处于IETF草案阶段，IETF尚未批准，内容今后可能发生变化。
请先打开自己网站的robots.txt，确认当前的设置情况。
本文转载自 AI Friends。