Cloudflare с помощью 1% своей сети направила краулер OpenAI на сотни миллионов страниц — и не назвала цену

Cloudflare·+1.08% — Cloudflare, up 1.08 percent as of its last quote опубликовала первые результаты пилотного проекта по обнаружению контента, запущенного вместе с OpenAI в июле↗: они закрывают вопрос о том, работает ли технология, но вопрос о деньгах оставляют ровно там, где он был ¹. Сигналы, собранные примерно с 1% сети Cloudflare, помогли поисковому краулеру OpenAIPVT$1.18T — OpenAI, private, latest valuation $1.18T найти и проиндексировать сотни миллионов веб-страниц, которых в его индексе никогда не было ¹. Нигде в публикации цена не названа; на её месте сказано, что две компании всё ещё выясняют, как обнаружение контента превращается в «реальные бизнес-результаты» ¹.

Сигнал — из трафика, а не из ссылок

Краулер, идущий по ссылкам, никогда не найдёт страницу, на которую никто не ссылается, — именно поэтому инструкция к вашей конкретной модели стиральной машины может так и остаться невидимой для ИИ-поиска ¹.

Граничная сеть (edge) Cloudflare стоит перед самим трафиком более чем пятой части интернета, поэтому она видит, какие адреса реально запрашивают живые люди, и по поведению кэша замечает, когда страница изменилась ². Эти метаданные поступают в планировщик обходов OpenAI и наводят краулер на страницы, которые стоит загружать, а остальные пропускают ². На выходе — ответ ChatGPT, который приводит ровно к той самой инструкции, а у сайта, где она размещена, — меньше напрасных загрузок ¹.

У доступа есть цена. У обнаружения — нет.

Другую сторону этого рынка Cloudflare уже обслуживает. AI Crawl Control, доступный на любом тарифе↗, даёт владельцам сайтов шлагбаум: видно, какие ИИ-сервисы приходят, и каждого краулера можно впустить или заблокировать ³. Pay Per Crawl, всё ещё в бета-версии, добавляет кассу: владелец назначает цену за один обход, которую ИИ-компании платят через Stripe ³. Пилот же остаётся по другую сторону шлагбаума: в ход идут только метаданные страниц, но никогда само содержимое, и сигнал не даёт права доступа ¹.

Так что владелец сайта на Cloudflare уже может брать с ИИ-компании плату за каждую загруженную страницу, а пилот передаёт OpenAI сигналы, которые направляют этот самый краулер, без всякой цены ¹.

Разницу на себе ощущают издатели. По данным Chartbeat за март 2026 года↗, переходы из ChatGPT всё ещё составляли менее 1% просмотров страниц на сайтах издателей, а следующий этап пилота измеряет, что даёт сайтам само обнаружение ².

Контрольная точка — 5 ноября

OpenAI — частная компания, поэтому в роли публичной здесь выступает Cloudflare (NYSE: NET): 13 октября она назначила публикацию отчётности за III квартал↗ на 5 ноября, после закрытия торгов ⁴⁵. Рынок всё это в цену пока не закладывает. Акции NET снижаются четвёртую сессию подряд с рекордной отметки $370, достигнутой 6 октября, но с начала года всё ещё выросли более чем наполовину ⁶.

Эти бумаги торгуются с мультипликатором цена/выручка около 49,5 — цифра, стоявшая в центре нашего тезиса от 14 октября: Cloudflare продолжает скупать все слои инфраструктуры, на которых строятся ИИ-агенты, а купившие по такой цене платят за всё это ещё до того, как новейшие слои начнут приносить хоть какую-то выручку.

Разбор Simply Wall St, опубликованный на Yahoo Finance↗, уже рассматривает слой управления краулерами как ров между издателями и ИИ-компаниями и называет «практичные, монетизируемые сервисы» испытанием на исполнение ⁷. Пилот — первое рабочее доказательство для слоя, лежащего под этими инструментами контроля: сигналы работают, это доказано, но в посте нет ни слова о том, сколько за них кто-либо готов платить. Назначит ли Cloudflare когда-нибудь цену за обнаружение контента — вопрос, на который конференц-колл 5 ноября может дать первые ответы.