--- title: "Cloudflare с помощью 1% своей сети направила краулер OpenAI на сотни миллионов страниц — и не назвала цену" description: "Сигналы с 1% сети Cloudflare привели краулер OpenAI к сотням миллионов страниц, которые не найдёт ни один робот, идущий по ссылкам. В публикации не названо ни доллара, а отчётность за III квартал теперь назначена на 5 ноября." publisher: "The Inference" section: "Platforms" published: 2026-10-16T18:17:46.946Z modified: 2026-10-16T18:17:46.946Z canonical: https://theinference.org/article/cloudflare-steered-openai-s-crawler-to-hundreds-of-millions-of-pages-with-1-of-its-network-named-no-price/ru language: ru keywords: "Cloudflare, OpenAI, AI Crawling, Web Publishing, Stock Valuation" --- # Cloudflare с помощью 1% своей сети направила краулер OpenAI на сотни миллионов страниц — и не назвала цену > Сигналы с 1% сети Cloudflare привели краулер OpenAI к сотням миллионов страниц, которые не найдёт ни один робот, идущий по ссылкам. В публикации не названо ни доллара, а отчётность за III квартал теперь назначена на 5 ноября. [Cloudflare](https://theinference.org/markets/companies/cloudflare) опубликовала первые результаты [пилотного проекта по обнаружению контента, запущенного вместе с OpenAI в июле](https://blog.cloudflare.com/cloudflare-openai-discovery-agentic-web/): они закрывают вопрос о том, работает ли технология, но вопрос о деньгах оставляют ровно там, где он был [1]. Сигналы, собранные примерно с 1% сети Cloudflare, помогли поисковому краулеру [OpenAI](https://theinference.org/markets/companies/openai) найти и проиндексировать сотни миллионов веб-страниц, которых в его индексе никогда не было [1]. Нигде в публикации цена не названа; на её месте сказано, что две компании всё ещё выясняют, как обнаружение контента превращается в «реальные бизнес-результаты» [1]. ## Сигнал — из трафика, а не из ссылок Краулер, идущий по ссылкам, никогда не найдёт страницу, на которую никто не ссылается, — именно поэтому инструкция к вашей конкретной модели стиральной машины может так и остаться невидимой для ИИ-поиска [1]. Граничная сеть (edge) Cloudflare стоит перед самим трафиком более чем пятой части интернета, поэтому она видит, какие адреса реально запрашивают живые люди, и по поведению кэша замечает, когда страница изменилась [2]. Эти метаданные поступают в планировщик обходов OpenAI и наводят краулер на страницы, которые стоит загружать, а остальные пропускают [2]. На выходе — ответ ChatGPT, который приводит ровно к той самой инструкции, а у сайта, где она размещена, — меньше напрасных загрузок [1]. ## У доступа есть цена. У обнаружения — нет. Другую сторону этого рынка Cloudflare уже обслуживает. [AI Crawl Control, доступный на любом тарифе](https://developers.cloudflare.com/ai-crawl-control/), даёт владельцам сайтов шлагбаум: видно, какие ИИ-сервисы приходят, и каждого краулера можно впустить или заблокировать [3]. Pay Per Crawl, всё ещё в бета-версии, добавляет кассу: владелец назначает цену за один обход, которую ИИ-компании платят через [Stripe](https://theinference.org/markets/companies/stripe) [3]. Пилот же остаётся по другую сторону шлагбаума: в ход идут только метаданные страниц, но никогда само содержимое, и сигнал не даёт права доступа [1]. Так что владелец сайта на Cloudflare уже может брать с ИИ-компании плату за каждую загруженную страницу, а пилот передаёт OpenAI сигналы, которые направляют этот самый краулер, без всякой цены [1]. Разницу на себе ощущают издатели. По [данным Chartbeat за март 2026 года](https://www.msn.com/en-us/news/other/chatgpt-search-gained-hundreds-of-millions-of-pages-link-crawlers-never-found/ar-AA2em8Jk), переходы из ChatGPT всё ещё составляли менее 1% просмотров страниц на сайтах издателей, а следующий этап пилота измеряет, что даёт сайтам само обнаружение [2]. ## Контрольная точка — 5 ноября OpenAI — частная компания, поэтому в роли публичной здесь выступает Cloudflare (NYSE: NET): 13 октября она [назначила публикацию отчётности за III квартал](https://www.nasdaq.com/press-release/cloudflare-announces-date-third-quarter-2026-financial-results-2026-10-13) на 5 ноября, после закрытия торгов [4][5]. Рынок всё это в цену пока не закладывает. Акции NET снижаются четвёртую сессию подряд с рекордной отметки $370, достигнутой 6 октября, но с начала года всё ещё выросли более чем наполовину [6]. Эти бумаги торгуются с мультипликатором цена/выручка около 49,5 — цифра, стоявшая в центре [нашего тезиса от 14 октября](https://theinference.org/article/cloudflare-is-buying-the-whole-stack-ai-agents-build-on-and-the-stock-trades-at-49-5-times-sales): Cloudflare продолжает скупать все слои инфраструктуры, на которых строятся ИИ-агенты, а купившие по такой цене платят за всё это ещё до того, как новейшие слои начнут приносить хоть какую-то выручку. [Разбор Simply Wall St, опубликованный на Yahoo Finance](https://finance.yahoo.com/technology/ai/articles/cloudflare-net-ai-crawler-controls-060920372.html), уже рассматривает слой управления краулерами как ров между издателями и ИИ-компаниями и называет «практичные, монетизируемые сервисы» испытанием на исполнение [7]. Пилот — первое рабочее доказательство для слоя, лежащего под этими инструментами контроля: сигналы работают, это доказано, но в посте нет ни слова о том, сколько за них кто-либо готов платить. Назначит ли Cloudflare когда-нибудь цену за обнаружение контента — вопрос, на который конференц-колл 5 ноября может дать первые ответы. ## Takeaway Пилот Cloudflare и OpenAI по обнаружению контента (discovery) доказывает, что сигналы работают: проиндексированы сотни миллионов страниц, которых не находят краулеры, идущие по ссылкам. Но цена в публикации не названа; конференц-колл 5 ноября по итогам III квартала — первая контрольная точка, где станет ясно, превращается ли обнаружение контента в выручку. ## Sources 1. [Cloudflare Blog, 'Cloudflare and OpenAI: Making AI discovery better for everyone,' 15 October 2026](https://blog.cloudflare.com/cloudflare-openai-discovery-agentic-web/) 2. [Tech Times via MSN, 'ChatGPT search gained hundreds of millions of pages link crawlers never found,' 15 October 2026](https://www.msn.com/en-us/news/other/chatgpt-search-gained-hundreds-of-millions-of-pages-link-crawlers-never-found/ar-AA2em8Jk) 3. [Cloudflare documentation, 'AI Crawl Control: Overview,' updated 14 August 2026](https://developers.cloudflare.com/ai-crawl-control/) 4. [TMCnet, 'Cloudflare Announces Date of Third Quarter 2026 Financial Results,' 13 October 2026](https://www.tmcnet.com/usubmit/2026/10/13/10462358.htm) 5. [Nasdaq, 'Cloudflare Announces Date of Third Quarter 2026 Financial Results,' 13 October 2026](https://www.nasdaq.com/press-release/cloudflare-announces-date-third-quarter-2026-financial-results-2026-10-13) 6. [Yahoo Finance (Schaeffer's), 'Software Stock Pullback Signaling Bulls to Move In,' 15 October 2026](https://finance.yahoo.com/markets/stocks/articles/software-stock-pullback-signaling-bulls-180912837.html) 7. [Yahoo Finance (Simply Wall St), 'Do Cloudflare's (NET) New AI Crawler Controls Quietly Strengthen Its Data-Moat Narrative?,' 25 September 2026](https://finance.yahoo.com/technology/ai/articles/cloudflare-net-ai-crawler-controls-060920372.html) --- Cloudflare с помощью 1% своей сети направила краулер OpenAI на сотни миллионов страниц — и не назвала цену — The Inference. Canonical: https://theinference.org/article/cloudflare-steered-openai-s-crawler-to-hundreds-of-millions-of-pages-with-1-of-its-network-named-no-price/ru