Cloudflare bloquea ya los agentes de IA en cualquier página con publicidad

La configuración por defecto cambió el 15 de septiembre

Desde el 15 de septiembre, los ajustes por defecto de Cloudflare para los dominios financiados con publicidad dejan pasar a los rastreadores de los buscadores, vetan el entrenamiento de IA y bloquean a los agentes dirigidos por el usuario en cualquier página que muestre un anuncio. La norma alcanza a los bots que recogen contenido para chats y a los agentes que usan un navegador; todavía no existe una directiva de exclusión (opt-out) para los agentes, solo el bloqueo ¹². Cloudflare fijó ese plazo en julio↗ para presionar a los rastreadores de uso mixto a separar la búsqueda del entrenamiento ²³.

La misma semana, Amazon vetó en su tienda al agente de compras de Meta, Muse, por riesgos vinculados a las credenciales, y Shopify integró Muse en el checkout de Shop Pay para todos sus comercios↗: se abrió un frente de la guerra de los agentes y se cerró el del contenido ⁴.

El entrenamiento de IA ya supone el 52% del tráfico de rastreadores

Solo el entrenamiento de IA representa ya el 52% del tráfico de rastreadores en la red de Cloudflare, frente al 22% de un año antes, y su consejero delegado, Matthew Prince, sostiene que la mayor parte del tráfico de internet ya no es humano ¹³. Los propietarios de sitios están trazando fronteras: el 17% restringe el entrenamiento y menos del 1% bloquea la búsqueda↗ ⁵.

Los rastreadores de uso mixto, diseñados a la vez para buscar y entrenar, suman otro 36,6% del tráfico verificado de rastreadores ⁶. El dinero circula sin dejarse ver: 132 millones de estadounidenses han comprado con ayuda de la IA, pero solo el 23% de los comercios puede ver ese tráfico o las ventas que genera, el mismo tráfico de agentes que las páginas con anuncios bloquean ahora por defecto ¹.

Tres contadores, una página, ningún precio

El piloto de acceso solo por invitación↗ de Google paga cuando un contenido «aporta de forma significativa» a una respuesta de Gemini, de los AI Overviews o de AI Mode, y solo Google decide qué cuenta ⁵⁷. Los participantes reciben una cifra mensual en Search Console, sin el cálculo que la respalde ⁸. Un directivo informado sobre el programa lo califica de «una auténtica caja negra»; otro dijo que las ofertas eran demasiado bajas para apuntarse ⁵.

El Pay Per Crawl de Cloudflare es mecánico: las webs fijan el precio desde 0,001 dólares por consulta, y el rastreador que paga recibe la página, código HTTP 200 incluido ⁵. Microsoft licencia contenido a Copilot a cambio de un «valor entregado» (delivered value) que no ha definido en público ⁵. Los que pagan son los laboratorios de IA y los creadores de agentes: en metálico, en el contador, o en inventario perdido cuando sus agentes quedan bloqueados. El contador que gane fijará el precio de la web abierta para la IA.

Las cuentas del cobrador del peaje

Cloudflare vende a la vez el bloqueo y el contador. La facturación encadena diez trimestres consecutivos de subidas, hasta los 696,1 millones de dólares del segundo trimestre de 2026↗, un 35,9% interanual, y aun así el trimestre cerró con pérdidas de 170 millones de dólares ⁹⁶. El mercado ha pagado de todos modos: 115.200 millones de dólares de capitalización bursátil tras un repunte del 43,9% en 90 días ⁶.

La escapatoria de Google y lo que hay que vigilar

Google remite a Google-Extended, un token de robots.txt que, según la compañía, nunca afecta al ranking de Search↗ y califica el piloto de fase de aprendizaje ³⁵¹⁰. Ese token solo permite excluirse del entrenamiento de Gemini; AI Overviews y AI Mode se controlan con un ajuste aparte de Search Console ¹⁰.

La lectura de Cloudflare sigue en pie: un anuncio marca una página hecha para una persona ¹. Quien queda expuesto es el pequeño editor financiado con publicidad, porque el agente lee, no compra nada y nunca ve el anuncio.

Las próximas lecturas ya tienen fecha: las herramientas de Google para Google-Extended a nivel de URL llegan en cuestión de semanas; el control único de Cloudflare sobre cuánto contenido aparece en los resúmenes de IA, para principios del año que viene; y el soporte de Bing, de Microsoft, para excluir el entrenamiento está previsto para comienzos de 2027 ⁵¹⁰. Los comercios abrieron su checkout a los agentes; la capa de contenido acaba de instalar una caseta de peaje.