你的网站，你做主：面向所有客户的全新AI流量管理选项
Cloudflare宣布为所有客户提供新的AI流量管理选项，让网站所有者能够自主决定AI爬虫和机器人如何访问其内容。这些新功能包括更精细的流量过滤规则、自定义AI爬虫控制，以及针对不同AI服务提供商的差异化访问策略，帮助网站管理员在保护内容的同时，也能控制AI模型对其数据的使用方式。
背景速读
Cloudflare 是全球最大的内容分发网络（CDN）和网络安全服务商之一，几乎所有网站都可以通过它加速访问并抵御攻击。近日，Cloudflare 推出新功能，允许网站管理员明确选择是否允许 AI 公司的爬虫抓取其网站内容来训练大语言模型（如 ChatGPT、Google Gemini 等）。此前，很多 AI 公司无视网站原有的爬虫协议（robots.txt），直接抓取内容用于训练，引发内容创作者和出版商的不满。Cloudflare 的新工具让网站可以一键屏蔽所有 AI 爬虫，或只允许特定 AI 公司访问，让内容所有者重新掌握控制权。