AI 爬虫退出标准

OpenAI、谷歌、微软与 Anthropic 表示将采用一项新的“策略令牌”标准，让出版商可在 robots.txt 中一次性向多家 AI 公司声明训练偏好，而无需逐家设置。该提案由 Anthropic 标准技术负责人提交至 IETF，Meta 也表示支持但未承诺执行。

据 SiliconANGLE 报道，谷歌、Anthropic 等公司表态支持一项新的 AI 爬虫退出（opt-out）标准，允许网站所有者声明内容不用于 AI 训练。该标准意在为内容方与模型厂商之间提供机器可读的授权机制，可能影响未来训练数据的获取方式。