Cloudflare Pay-Per-Crawl（HTTP 402）

机制

站点自设每次请求价，AI 爬虫收到 HTTP 402 与 crawler-price 头后决定是否付费 [1]。Cloudflare 2025-07-01 起对新域名默认拦截 AI 爬虫并私测该产品 [2]；2026-07 宣布由"按抓取付费"转向"按 AI 结果中使用付费"，并与 You.com、Ceramic.ai 合作 [3]。2026-01-15/16 Cloudflare 宣布收购授权市场 Human Native（条款未披露）。

价格与口径

价格口径已按 Cloudflare 官方文档裁决：站点按 zone 设定统一的每次抓取价，官方文档写明"最低价为 $0.001 美元每次抓取"，当前为封闭测试（closed beta）。因此"最低 $0.01"的说法没有一手依据，不采用。第三方统计称多数发布商定价在 $0.001–0.005（通用内容），少数优质新闻与一手研究在 $0.05–0.25，这是对已定价站点的观察而非官方价目表 [1]。"超 100 万启用"指客户数而非站点数，也不等于有成交；活跃成交估计仅数万（第三方估算，截至 2026-04）[1]。

局限

与 robots.txt 一样要靠爬虫方配合；Cloudflare 曾指 Perplexity 轮换 UA 规避拦截，后者否认。治理背景见 robots.txt 与 AI 爬虫治理。

来源

1. https://presenc.ai/research/cloudflare-pay-per-crawl-state-2026 (2026-10-15)
2. https://alternativeto.net/news/2025/7/cloudflare-blocks-ai-crawlers-by-default-and-launches-pay-per-crawl-for-publishers (2026-10-15)
3. https://itbrief.com.au/story/cloudflare-tightens-ai-crawler-controls-for-publishers (2026-10-15)