--- title: "Cloudflare以1%网络流量为OpenAI爬虫引路,发现数亿网页,却只字未提价格" description: "来自Cloudflare网络约1%流量的信号,引导OpenAI的爬虫找到了数亿个只靠跟踪链接永远发现不了的网页。官方博文未提任何金额,第三季度财报已定于11月5日发布。" publisher: "The Inference" section: "Platforms" published: 2026-10-16T18:17:46.946Z modified: 2026-10-16T18:17:46.946Z canonical: https://theinference.org/article/cloudflare-steered-openai-s-crawler-to-hundreds-of-millions-of-pages-with-1-of-its-network-named-no-price/zh-CN language: zh-CN keywords: "Cloudflare, OpenAI, AI Crawling, Web Publishing, Stock Valuation" --- # Cloudflare以1%网络流量为OpenAI爬虫引路,发现数亿网页,却只字未提价格 > 来自Cloudflare网络约1%流量的信号,引导OpenAI的爬虫找到了数亿个只靠跟踪链接永远发现不了的网页。官方博文未提任何金额,第三季度财报已定于11月5日发布。 [Cloudflare](https://theinference.org/markets/companies/cloudflare)公布了[7月与OpenAI联手启动的内容发现(Discovery)试点](https://blog.cloudflare.com/cloudflare-openai-discovery-agentic-web/)的首批结果:能力问题有了答案,钱的问题原地未动[1]。从Cloudflare网络约1%流量中提取的信号,帮助[OpenAI](https://theinference.org/markets/companies/openai)的搜索爬虫发现并收录了数亿个从未进入其索引的网页[1]。博文通篇没有给出价格;在原本该报价的地方,只说两家公司仍在研究内容发现如何转化为“真正的业务成果”[1]。 ## 信号来自流量,而非链接 只沿链接爬行的爬虫,永远找不到没有任何链接指向的网页。正因如此,连你家那台洗衣机的说明书,都可能至今没被AI搜索看见[1]。 Cloudflare的边缘网络本身就架在流量的必经之路上,覆盖全球超过五分之一的网站,因此既看得到真实用户实际请求了哪些地址,也能从页面的缓存行为看出页面何时发生了变化[2]。这些元数据接入OpenAI的爬取调度之后,会把爬虫对准值得抓取的页面,跳过其余[2]。链条的末端,是ChatGPT的答案直达那册说明书,而托管页面的网站也省去了不少无效抓取[1]。 ## 访问明码标价,发现尚无定价 这个市场的另一端,Cloudflare早已在经营。[向所有套餐开放的AI爬虫控制(AI Crawl Control)功能](https://developers.cloudflare.com/ai-crawl-control/)把闸门交到网站主手里:可以查看有哪些AI服务来访,并逐个爬虫放行或拦截[3]。仍在测试阶段的Pay Per Crawl(按爬取付费)则补上了收银机,让网站主为每次爬取定价,AI公司通过[Stripe](https://theinference.org/markets/companies/stripe)支付[3]。试点则始终待在闸门的另一侧:只涉及页面的元数据,从不涉及内容,信号也不赋予任何访问权限[1]。 于是便出现了这样的局面:使用Cloudflare的网站主,如今已能对AI公司的每一次页面抓取收费;而试点把引导这台爬虫的信号交给OpenAI,没有附带任何价码[1]。 这中间的差别,出版商感受最直接。在[Chartbeat 2026年3月的数据](https://www.msn.com/en-us/news/other/chatgpt-search-gained-hundreds-of-millions-of-pages-link-crawlers-never-found/ar-AA2em8Jk)中,ChatGPT带来的引荐流量仍不到出版商页面浏览量的1%;而试点的下一阶段,正是要量化"被找到"究竟给获得索引的网站带来什么[2]。 ## 检验节点定在11月5日 OpenAI并未上市,这里的上市公司是Cloudflare(NYSE:NET),公司已于10月13日[公布第三季度财报发布日期](https://www.nasdaq.com/press-release/cloudflare-announces-date-third-quarter-2026-financial-results-2026-10-13),定于11月5日美股收盘后发布[4][5]。这一切都没有体现在股价上:NET较10月6日创下的370美元历史高点已连跌四个交易日,年内涨幅仍超过50%[6]。 该股目前市销率约为49.5倍,这正是[我们10月14日作出的判断](https://theinference.org/article/cloudflare-is-buying-the-whole-stack-ai-agents-build-on-and-the-stock-trades-at-49-5-times-sales)的核心:Cloudflare在持续收购AI智能体赖以搭建的每一层基础设施,而按当前价格买入的投资者,是在最新几层尚未产生任何收入之前,就为这一切买了单。 [Simply Wall St发布在雅虎财经上的一篇分析](https://finance.yahoo.com/technology/ai/articles/cloudflare-net-ai-crawler-controls-060920372.html)已把爬虫控制层视为出版商与AI公司之间的护城河,并将"实用、可变现的服务"列为执行层面的考验[7]。这次试点为位于这些控制之下的那一层提供了第一份实际生效的证据:信号确实有效;但文章丝毫没有说明,有谁愿意为这些信号支付多少钱。Cloudflare究竟会不会给内容发现标上价码,是11月5日财报电话会议可以开始回答的问题。 ## Takeaway Cloudflare与OpenAI的内容发现试点证明信号确实有效,已让数亿个链接爬虫从未发现的网页得到收录,但博文未提任何价格;11月5日的财报电话会议,将是检验内容发现能否变成收入的首个检验节点。 ## Sources 1. [Cloudflare Blog, 'Cloudflare and OpenAI: Making AI discovery better for everyone,' 15 October 2026](https://blog.cloudflare.com/cloudflare-openai-discovery-agentic-web/) 2. [Tech Times via MSN, 'ChatGPT search gained hundreds of millions of pages link crawlers never found,' 15 October 2026](https://www.msn.com/en-us/news/other/chatgpt-search-gained-hundreds-of-millions-of-pages-link-crawlers-never-found/ar-AA2em8Jk) 3. [Cloudflare documentation, 'AI Crawl Control: Overview,' updated 14 August 2026](https://developers.cloudflare.com/ai-crawl-control/) 4. [TMCnet, 'Cloudflare Announces Date of Third Quarter 2026 Financial Results,' 13 October 2026](https://www.tmcnet.com/usubmit/2026/10/13/10462358.htm) 5. [Nasdaq, 'Cloudflare Announces Date of Third Quarter 2026 Financial Results,' 13 October 2026](https://www.nasdaq.com/press-release/cloudflare-announces-date-third-quarter-2026-financial-results-2026-10-13) 6. [Yahoo Finance (Schaeffer's), 'Software Stock Pullback Signaling Bulls to Move In,' 15 October 2026](https://finance.yahoo.com/markets/stocks/articles/software-stock-pullback-signaling-bulls-180912837.html) 7. [Yahoo Finance (Simply Wall St), 'Do Cloudflare's (NET) New AI Crawler Controls Quietly Strengthen Its Data-Moat Narrative?,' 25 September 2026](https://finance.yahoo.com/technology/ai/articles/cloudflare-net-ai-crawler-controls-060920372.html) --- Cloudflare以1%网络流量为OpenAI爬虫引路,发现数亿网页,却只字未提价格 — The Inference. Canonical: https://theinference.org/article/cloudflare-steered-openai-s-crawler-to-hundreds-of-millions-of-pages-with-1-of-its-network-named-no-price/zh-CN