内容付费模式 关键字列表
Cloudflare新规要求AI公司为内容付费,混合爬虫将被默认拦截

Cloudflare新规要求AI公司为内容付费,混合爬虫将被默认拦截

Cloudflare宣布,自2026年9月15日起,将默认屏蔽"混合用途"爬虫访问含广告页面,要求AI公司将用于传统搜索的爬虫与用于AI训练及智能代理的爬虫分开。此举影响AI模型提供商获取网页内容的方式。同时,Cloudflare将"按使用付费"模式升级,允许出版商在内容产生价值时向AI公司收费,而非仅限于内容被抓取时。目前已与Ceramic.ai和You.com达成合作。