Cloudflare passa a bloquear agentes de IA em qualquer página com anúncio

A virada do padrão ocorreu em 15 de setembro

Desde 15 de setembro, as configurações padrão da Cloudflare para domínios sustentados por publicidade permitem a passagem de rastreadores de busca, recusam treinamento de IA e bloqueiam agentes comandados pelo usuário em qualquer página que exiba anúncios. Bots de busca por chat e agentes de uso no navegador entram na regra; ainda não há diretiva de exclusão para agentes, apenas bloqueio ¹². A Cloudflare definiu esse prazo em julho↗, pressionando rastreadores de uso misto a separar busca de treinamento ²³.

Na mesma semana, a Amazon proibiu o agente de compras Muse, da Meta, em sua loja por riscos de credenciais, enquanto a Shopify integrou o Muse ao checkout do Shop Pay em toda sua rede de comerciantes↗: uma frente da guerra dos agentes se abriu, a frente de conteúdo se fechou ⁴.

Treinamento de IA já responde por 52% do tráfego de rastreadores

O treinamento de IA isoladamente representa 52% do tráfego de rastreadores na rede da Cloudflare, ante 22% um ano antes, e o CEO Matthew Prince afirma que a maior parte do tráfego na internet hoje é não humana ¹³. Proprietários de sites estão traçando limites: 17% restringem o treinamento, menos de 1% bloqueiam a busca↗ ⁵.

Rastreadores de uso misto, construídos para busca e treinamento simultaneamente, respondem por mais 36,6% do tráfego verificado de rastreadores ⁶. O dinheiro se move invisível: 132 milhões de americanos já compraram com ajuda de IA, mas apenas 23% dos comerciantes conseguem identificar esse tráfego ou suas vendas — o mesmo tráfego de agentes que as páginas com anúncio agora bloqueiam por padrão ¹.

Três medidores, uma página, nenhum preço

O piloto exclusivo por convite↗ do Google paga quando o conteúdo "contribui significativamente" para uma resposta no Gemini, no AI Overviews ou no AI Mode — e só o Google decide o que conta ⁵⁷. Participantes recebem um valor mensal no Search Console, sem cálculo algum por trás ⁸. Um executivo que teve acesso ao programa o chamou de "bem caixa-preta"; outro disse que as ofertas eram baixas demais para aderir ⁵.

O Pay Per Crawl da Cloudflare é mecânico: sites definem o preço a partir de US$ 0,001 por requisição, e o rastreador que paga recebe a página inteira, HTTP 200 e tudo o mais ⁵. A Microsoft licencia conteúdo para o Copilot com base em um critério de "valor entregue" que nunca definiu publicamente ⁵. Quem paga são laboratórios de IA e desenvolvedores de agentes — seja em dinheiro vivo no medidor, seja em inventário perdido quando seus agentes são bloqueados. O medidor que vencer vai ditar o preço da web aberta para a IA.

Os livros do cobrador de pedágio

A Cloudflare vende tanto o bloqueio quanto o medidor. A receita subiu por dez trimestres consecutivos, atingindo US$ 696,1 milhões no 2º trimestre de 2026↗, alta de 35,9% em 12 meses — mas o período ainda registrou prejuízo de US$ 170 milhões ⁹⁶. O mercado, porém, aceitou o preço: capitalização de US$ 115,2 bilhões após valorização de 43,9% em 90 dias ⁶.

A saída do Google e o que ficar de olho

O Google aponta para o Google-Extended, um token no robots.txt que, segundo a empresa, nunca interfere no ranking de busca, e classifica o piloto como fase de aprendizado ³⁵¹⁰. O token permite excluir apenas o treinamento do Gemini; uma configuração à parte no Search Console controla o AI Overviews e o AI Mode ¹⁰.

A tese da Cloudflare segue de pé: anúncio é marca de página feita para gente ¹. Quem fica exposto é o pequeno editor sustentado por publicidade — porque o agente lê, não compra nada e jamais vê o anúncio.

As próximas medições têm data marcada: as ferramentas de Google-Extended em nível de URL chegam em semanas, o controle unificado da Cloudflare sobre quanto conteúdo aparece em resumos de IA chega no início do próximo ano, e o suporte a exclusão de treinamento no Bing da Microsoft está programado para o início de 2027 ⁵¹⁰. As lojas abriram seus checkouts para os agentes; a camada de conteúdo acaba de instalar uma cabine de pedágio.