Cloudflare a guidé le crawler d'OpenAI vers des centaines de millions de pages avec 1 % de son réseau, sans fixer de prix
Les signaux issus de 1 % du réseau de Cloudflare ont orienté le crawler d'OpenAI vers des centaines de millions de pages que les robots qui suivent les liens ne trouvent jamais. Le billet reste muet sur l'argent, et les résultats du troisième trimestre sont désormais fixés au 5 novembre.
Richard Tang · 3 min read
Cloudflare−7.06% — Cloudflare, down 7.06 percent today publie les premiers résultats du pilote de découverte lancé avec OpenAI en juillet : la question des capacités est tranchée, celle de l'argent reste exactement là où elle était 1. Tirés d'environ 1 % de son réseau, ces signaux ont aidé le crawler de recherche d'OpenAI$1.18T — OpenAI, private, latest valuation $1.18T — le robot d'exploration — à découvrir et à indexer des centaines de millions de pages web qui n'avaient jamais figuré dans son index 1. Le billet de blog ne fixe nulle part de prix ; là où il devrait figurer, il précise que les deux entreprises cherchent encore à déterminer comment la découverte se traduit en « résultats commerciaux concrets » 1.
Le signal vient du trafic, pas des liens
Un robot qui suit les liens ne trouve jamais une page qu'aucun lien ne désigne. Voilà pourquoi la notice du modèle exact de votre machine à laver peut rester invisible pour la recherche par IA 1.
Placé sur le chemin du trafic lui-même, le réseau edge de Cloudflare couvre plus d'un cinquième du web : il voit donc quelles adresses sont réellement demandées par de vrais internautes, et quand le comportement en cache d'une page indique qu'elle a changé 2. Injectées dans la planification des crawls d'OpenAI, ces métadonnées orientent le crawler vers les pages qui méritent d'être récupérées et font l'impasse sur les autres 2. À l'arrivée, une réponse de ChatGPT atteint la bonne notice, avec moins de requêtes gâchées pour le site qui l'héberge 1.
L'accès a un prix. Pas la découverte.
Cloudflare exploite déjà l'autre côté de ce marché. AI Crawl Control, disponible dans toutes les offres met la barrière entre les mains des propriétaires de sites : voir quels services d'IA les visitent, et les autoriser ou les bloquer, crawler par crawler 3. Pay Per Crawl, encore en bêta, ajoute la caisse : les propriétaires y fixent un prix par crawl, que les entreprises d'IA règlent via Stripe 3. Le pilote, lui, reste en amont de cette barrière : des métadonnées sur les pages, jamais leur contenu — et un signal ne donne aucun droit d'accès 1.
Un propriétaire de site client de Cloudflare peut donc déjà facturer chaque récupération de page à une entreprise d'IA, tandis que le pilote remet à OpenAI, sans y attacher le moindre prix, les signaux qui guident son crawler 1.
Les éditeurs, eux, ressentent la différence. Le trafic envoyé par ChatGPT représentait encore moins de 1 % du trafic en pages vues des éditeurs selon les données de Chartbeat pour mars 2026 ; la phase suivante du pilote mesure ce que le fait d'être trouvé apporte réellement aux sites qui se font indexer 2.
Rendez-vous le 5 novembre
OpenAI n'est pas cotée en Bourse ; ici, la valeur cotée est Cloudflare (NYSE : NET), qui a annoncé le 13 octobre la date de ses résultats du troisième trimestre, prévus le 5 novembre après la clôture 45. Le titre n'intègre rien de tout cela. NET a reculé quatre séances consécutives depuis son record de 370 dollars, établi le 6 octobre, et reste en hausse de plus de 50 % depuis le début de l'année 6.
Ces titres s'échangent à environ 49,5 fois le chiffre d'affaires — le chiffre au cœur de la thèse que nous développions le 14 octobre : Cloudflare continue d'acheter chaque couche d'infrastructure sur laquelle se construisent les agents d'IA, et les investisseurs qui achètent à ce niveau paient l'ensemble avant que les couches les plus récentes ne dégagent le moindre revenu.
Une analyse de Simply Wall St publiée sur Yahoo Finance voit déjà dans la couche de contrôle des crawlers un rempart entre les éditeurs et les entreprises d'IA, et désigne les « services pratiques et monétisables » comme test d'exécution 7. Le pilote est la première preuve, en conditions réelles, de la couche située sous ces contrôles : les signaux fonctionnent, c'est démontré, et le billet ne dit rien de ce que quiconque paierait pour eux. Reste une question, à laquelle la publication de résultats du 5 novembre pourra commencer de répondre : Cloudflare mettra-t-il jamais un prix sur la découverte ?
Deepdive
AI-generated from this story and its cited sources. Not investment advice.



