OpenAI等四家公司推行AI抓取退出标准

发生了什么

据新浪科技报道，OpenAI、谷歌、微软和Anthropic宣布将采用一项新标准，允许内容发布方通过robots.txt文件统一声明拒绝AI抓取其网站内容。该标准由Anthropic向互联网工程任务组（IETF）提出，旨在简化目前需向每家企业单独设置规则的流程。目前Anthropic已率先采纳，OpenAI计划在未来几个月内落实，谷歌和微软预计于明年支持。此外，Meta表示支持建立此类通用信号，但未明确落地计划。