Cloudflare 将 AI 爬虫按用途分类管理
时代：大模型时代 · 2020年代—现在
2026年7月1日，Cloudflare 宣布按 Search、Agent 和 Training 三类用途管理 AI 流量。自9月15日起，新加入 Cloudflare 的域名将在带广告的页面上默认阻止 Training 和 Agent 类爬虫，同时默认允许 Search 类爬虫；站点所有者可以调整设置，多用途爬虫按最严格的适用规则处理。
Cloudflare
来源与支持内容
Your site, your rules: new AI traffic options for all customers
Cloudflare · 来源类型：primary-announcement
Documents Search, Agent, and Training controls and September 15 defaults.
发布日期： ·访问日期：