资讯1 分钟阅读·
Cloudflare推出禁止AI训练设置,被搜索与被训练拆成两个选择
网站能只挡训练、保留搜索了,但Bing要到2027年初才接收该偏好,此前仍需NOARCHIVE。
Cloudflare于9月15日推出"禁止AI训练"设置,面向所有套餐开放。据其官方博客说明,网站可用它表达不允许训练的偏好,同时保留符合其要求的混合用途爬虫进行搜索索引,其他训练爬虫则被拦截。对混合用途爬虫来说这只是偏好信号,实际效果取决于对方是否遵守。
这把"能否进入搜索结果"和"能否用于模型训练"拆成了两个选择:直接全面封锁,会连Googlebot、Bingbot等搜索抓取一起挡掉,两种设置不能混用。
各家支持进度仍有差异。Cloudflare称,微软通过robots.txt接收站点级禁止训练偏好的功能目标2027年初上线;在此之前,仅开启该设置不会自动向Bing传达偏好,网站仍需使用微软现有的NOARCHIVE等控制。