数据抓取

Cloudflare 给 AI 爬虫办正式登记 — 互联网的'AI 流量规矩'开始有形了

我们注意到 Cloudflare 上线了 BotBase for Operators——AI 爬虫运营方可以申报自家机器人、追踪审核状态、被驳回时看到具体原因。这是上月 Content Independence Day 的延续：AI 抓数据的规则，正在被这类基础设施公司一件件重写。