Cloudflare blockte im dritten Quartal 13,47 Prozent der Anfragen von KI-Bots, nach 5,98 Prozent im Vorjahr – Umgehungsanbieter verkaufen Agenten den Weg hinein

Cloudflare hat mit der Umstellung der Standardeinstellung am 15. September den Zugang für Agenten in ein kostenpflichtiges Privileg verwandelt – die Abweisungszahlen des dritten Quartals zeigen es bereits. Der stille Gewinner könnte auf der anderen Seite der Mauer stehen: die Umgehungsanbieter, die Agenten den Weg darüber verkaufen.

Original lesen

Vincent JiangVincent Jiang · 3 min read
Share
Cloudflare-Mitgründer und CEO Matthew Prince spricht auf der Bühne der TechCrunch Disrupt Berlin 2019
1 / 6Slide 1 of 6
Cloudflare-Mitgründer und CEO Matthew Prince auf der TechCrunch Disrupt Berlin im Dezember 2019. Sein Unternehmen hat am 15. September die Standardeinstellung auf die Blockierung von KI-Agenten umgestellt.

Die Mauer um das Netz ist in diesem Quartal höher geworden. Zwei Unternehmen stehen auf entgegengesetzten Seiten und kassieren Miete – jedes in seiner eigenen Währung.

Cloudflare+5.81% — Cloudflare, up 5.81 percent today hat am 15. September die Standardeinstellung umgestellt: Neue Domains im Cloudflare-Netzwerk blockieren KI-Agenten jetzt ausnahmslos, bestehende Websites wurden so umgestellt, dass sie Agenten auf allen Seiten mit Werbung aussperren 1. Der Zeitpunkt spiegelt sich in den Verkehrsdaten wider: Websites im Cloudflare-Netzwerk haben im dritten Quartal auf 13,47 Prozent der Anfragen von KI-Bots mit einer Zugriffsverweigerung geantwortet, nach 5,98 Prozent ein Jahr zuvor – vorläufige Zahlen auf Basis von Cloudflare Radar 2. Die Nachfrage schrumpft indes nicht mit. Suchanfragen und von Nutzern ausgelöste Anfragen – der zielgerichtete Crawl hinter den Antworten der Agenten – stiegen zwischen dem zweiten und dritten Quartal von 6,51 auf 11,92 Prozent der KI-Crawl-Aktivität 2. Im September machten Bots und Agenten laut Cloudflares eigenen Daten bereits mehr als die Hälfte aller Anfragen im Web aus 3.

Abweisungen von KI-Bots haben sich binnen eines Jahres mehr als verdoppelt

  • Zugriff für KI-Bots verweigert
  • Anteil von Such- und nutzerausgelösten Anfragen am KI-Crawl
  • Estimate
0%5%10%15%Q3 2025Q2 2026Q3 20265.98%6.51%
Data
Zugriff für KI-Bots verweigertAnteil von Such- und nutzerausgelösten Anfragen am KI-Crawl
Q3 20255.98%—
Q2 2026—6.51%
Q3 2026 (estimate)13.47%11.92%
Anteil der abgewiesenen Anfragen von KI-Bots (Q3 2025 vs. Q3 2026) sowie Anteil von Such- und nutzerausgelösten Anfragen an der KI-Crawl-Aktivität (Q2 vs. Q3 2026); Daten aus Cloudflare Radar, ausgewertet von TechnologyChecker.io, laut Mitteilung von Zen Media vom 9. Oktober 2026. Die Werte für das dritte Quartal 2026 sind vorläufig.2

Agenten stranden an der Kasse

Die Sperren gehen bereits zu Lasten der Verbraucher. Amazon+2.50% — Amazon, up 2.50 percent today blockiert Meta−0.37% — Meta, down 0.37 percent todays Muse inzwischen auf seiner Handelsplattform – der Agent kann sich dort weder umsehen noch einkaufen. Walmart, ein Muse-Partner, lässt Agenten an Buttons zur Verifizierung menschlicher Nutzer stranden, die nach Unternehmensangaben versehentlich auftauchen. Yelp weist sämtlichen nicht-menschlichen Datenverkehr ab, es sei denn, der Agent zahlt in sein Datenlizenzprogramm ein 1. Metas Antwort: ein offener Agent-to-Business-Standard, den der Konzern gemeinsam mit Walmart, Stripe, Sierra~$10B — Sierra, private, latest valuation ~$10B, Genesys, Rocket, NiCE und Decagon~$1.5B — Decagon, private, latest valuation ~$1.5B entworfen hat – acht namentlich genannte Partner, die gute Bots von schlechten trennen wollen 1.

Der Vermieter verkauft an beide Seiten

Cloudflare steht vor rund einem Fünftel des Web-Traffics 3 und vermarktet die Mauer von beiden Enden: über einen Marktplatz, auf dem KI-Bots für die Daten zahlen, die sie abrufen, und über die Erprobung eines Browsers, der eigens für KI-Agenten gebaut ist 1. Die Verknappung ist das Verkaufsargument – und dasselbe Unternehmen verkauft den Schlüssel dazu: Je mehr Agenten es abweist, desto wertvoller wird der kostenpflichtige Einlass über seinen Marktplatz. Aus einer Sicherheitsfunktion wird eine Mautstelle, deren Betreiber die Warteschlange kontrolliert.

Auf der Anbieterseite geht es leiser zu – aber auch pointierter. Anakin (YC S21) veröffentlichte am 6. Oktober seine Leitlinien für Agenten-Entwickler, am selben Tag, an dem TechCrunch die Welle der Blockaden dokumentierte 4. Sein Wire-Katalog umfasst mehr als 940 Plattformen und mehr als 4.500 Aktionen, inklusive eingebauter Umgehung von Cloudflare, Akamai, PerimeterX und DataDome – laut eigenen Marketingangaben, hier nicht getestet 5. Berechnet wird ein Credit pro Scraping-Vorgang, pauschal zwei pro Wire-Aktion, die Tarife liegen bei 12 bis 900 Dollar im Monat – und fehlgeschlagene Aufträge werden nicht abgerechnet 6. Diese letzte Klausel ist das Geschäftsmodell im Kleinen: Je härter die Standardeinstellungen durchgreifen, desto mehr wird Scheitern zum Standarderlebnis für selbst gebaute Agenten – und nicht abgerechnete Fehlversuche treiben das Volumen zu denen, die die Überquerung garantieren.

Die Weichenstellung fürs Geld

Formalisiert der Standard der acht Parteien den kostenpflichtigen Zugang, gewinnen die Mautbetreiber doppelt, und die Umgehungsanbieter werden in Richtung lizenzierte Partnerschaften gedrängt. Die Breite des Entwurfs (Stripe für Zahlungen, Walmart für den Einzelhandel, Sierra für Unternehmens-Agenten) signalisiert, dass es ernst gemeint ist 1. Stockt der Standard, vertieft sich der Burggraben. So oder so wird das kostenlose Web, das den Agenten versprochen wurde, neu bepreist – ein 403 nach dem anderen.

Deepdive

AI-generated from this story and its cited sources. Not investment advice.

Reader comments

0 comments

    Sign up

    Get your curated digest

    After email confirmation, you will receive a daily digest of the most relevant news that matter to your portfolio