OpenAI、Google、Microsoft 与 Anthropic 联合支持新标准,允许网站统一拒绝 AI 抓取
OpenAI、Google、Microsoft 和 Anthropic 宣布将采用新的通用标准,允许网站发布商通过统一设置拒绝内容被用于 AI 抓取和训练,无需再向各厂商单独配置。
推荐理由:各大模型厂商统一抓取排除标准,有助于网站管理者一次性配置多家 AI 爬虫的训练与调用权限。
OpenAI、Google、Microsoft 和 Anthropic 宣布将采用新的通用标准,允许网站发布商通过统一设置拒绝内容被用于 AI 抓取和训练,无需再向各厂商单独配置。
推荐理由:各大模型厂商统一抓取排除标准,有助于网站管理者一次性配置多家 AI 爬虫的训练与调用权限。