Cloudflare支持拒绝AI训练、保留搜索抓取
来源:Search Engine Journal · · 官方来源摘要 · 1 分钟阅读 · 流海编辑部
Cloudflare提供AI训练退出功能,同时保留搜索抓取;谷歌与苹果遵守退出设置,必应支持仍待落实。
训练退出Search Engine Journal
据 Search Engine Journal 报道,Cloudflare 的 Disallow AI Training 功能允许网站拒绝内容用于 AI 训练,同时保留兼具搜索用途的爬虫访问,不必屏蔽 Googlebot。
对出海团队的影响
对依赖搜索获客的出海网站,这提供了兼顾内容使用边界与搜索抓取的选项。材料称,谷歌和苹果遵守训练退出设置,必应对相关 robots.txt 设置的支持仍待落实。因此,不能将该设置视为对所有爬虫都有效的统一限制,也不宜把保留抓取等同于保证收录或排名。
接下来怎么做
建议先明确哪些站点内容需要限制 AI 训练,再核查 Cloudflare 相关功能的配置方式与适用范围。
若决定启用,建议检查现有 robots.txt 规则,避免误封搜索爬虫,并在调整后观察抓取与收录情况。
建议持续核查各平台对训练退出设置的支持状态,尤其是必应,避免仅凭一次配置判断内容已被全面排除在 AI 训练之外。
原始来源
https://www.searchenginejournal.com/cloudflare-lets-sites-disallow-ai-training-without-blocking-googlebot/589559/ ↗官方事实与编辑解读分段展示,具体条款请以官方最新说明为准。
继续了解增长实战
SEO · 广告投放 · 内容营销
查看「增长实战」全部文章 →