Cloudflare新政策敦促AI公司为出版商内容付费并分离搜索与训练爬虫

Cloudflare近日宣布，对使用其服务的网站默认配置进行重要调整，向整个人工智能行业设定一项新的“最后期限”：要求AI公司在今年9月15日前，将用于传统搜索的网络爬虫，与用于AI代理和模型训练的爬虫进行明确区分，否则这些“混合用途”爬虫将在大量带广告页面上被默认拦截。 阅读全文