---
title: "Q3 में क्लाउडफ्लेयर ने 13.47% एआई बॉट रिक्वेस्ट खारिज कीं, पिछले साल यह दर 5.98% थी; अब वेंडर्स एजेंटों को अंदर घुसने का रास्ता बेच रहे हैं"
description: "15 सितंबर को क्लाउडफ्लेयर के डिफॉल्ट बदलाव ने एजेंटों की पहुंच को पैसे से मिलने वाला विशेषाधिकार बना दिया, और तीसरी तिमाही के इनकार के आंकड़ों में यह अब साफ दिख रहा है। इस पूरे खेल का चुपचाप फायदा शायद उन बायपास वेंडर्स को मिलेगा जो एजेंटों को दीवार के उस पार उतरने का रास्ता बेच रहे हैं।"
publisher: "The Inference"
section: "Platforms"
published: 2026-10-09T17:30:27.854Z
modified: 2026-10-09T17:30:27.854Z
canonical: https://theinference.org/article/cloudflare-blocked-13-47-of-ai-bot-requests-in-q3-up-from-5-98-vendors-sell-agents-the-way-in/hi
language: hi
keywords: "Cloudflare, AI Agents, Web, Bots, Developer Tools"
---

# Q3 में क्लाउडफ्लेयर ने 13.47% एआई बॉट रिक्वेस्ट खारिज कीं, पिछले साल यह दर 5.98% थी; अब वेंडर्स एजेंटों को अंदर घुसने का रास्ता बेच रहे हैं

> 15 सितंबर को क्लाउडफ्लेयर के डिफॉल्ट बदलाव ने एजेंटों की पहुंच को पैसे से मिलने वाला विशेषाधिकार बना दिया, और तीसरी तिमाही के इनकार के आंकड़ों में यह अब साफ दिख रहा है। इस पूरे खेल का चुपचाप फायदा शायद उन बायपास वेंडर्स को मिलेगा जो एजेंटों को दीवार के उस पार उतरने का रास्ता बेच रहे हैं।

इस तिमाही वेब के इर्द-गिर्द की दीवार और ऊंची हो गई है। दीवार के दोनों ओर दो कंपनियां खड़ी हैं — अलग-अलग मुद्रा में अपना-अपना किराया वसूलती हुईं।

[क्लाउडफ्लेयर](https://theinference.org/markets/companies/cloudflare) ने 15 सितंबर को डिफॉल्ट बदल दिया: अब उसके नेटवर्क पर आने वाले नए डोमेन एआई एजेंटों को सीधे ब्लॉक करते हैं, और पुरानी साइटों को भी इस तरह शिफ्ट किया गया है कि विज्ञापन लगे हर पेज पर एजेंट ब्लॉक हों [1]। ट्रैफिक के आंकड़ों में इसका असर साफ दिख रहा है: तीसरी तिमाही में क्लाउडफ्लेयर के नेटवर्क की वेबसाइटों ने एआई बॉट रिक्वेस्ट का 13.47% हिस्सा पहुंच से इनकार (एक्सेस डिनाइड) वाले जवाब के साथ ठुकरा दिया। पिछले साल यह हिस्सा 5.98% था। ये [राडार से निकाले गए प्रारंभिक आंकड़े](https://finance.yahoo.com/technology/ai/articles/ai-crawlers-turned-away-more-110000504.html) हैं [2]। लेकिन मांग इस दीवार के हिसाब से घटने को तैयार नहीं है। दूसरी और तीसरी तिमाही के बीच एआई क्रॉल गतिविधि में सर्च और यूजर-ट्रिगर्ड (user-triggered) रिक्वेस्ट — यानी एजेंटों के जवाबों के पीछे चलने वाला मकसद-प्रेरित क्रॉल — की हिस्सेदारी 6.51% से उछलकर 11.92% हो गई [2]। सितंबर तक क्लाउडफ्लेयर के अपने आंकड़ों के मुताबिक कुल वेब रिक्वेस्ट में बॉट और एजेंटों की हिस्सेदारी आधे से पार जा चुकी थी [3]।

*Chart: **डिफॉल्ट बदलते ही एक साल में एआई बॉट रिक्वेस्ट का इनकार दोगुने से भी ऊपर** तीन तिमाहियों के दो आंकड़ा-सिलसिले। क्लाउडफ्लेयर के नेटवर्क पर एआई बॉट रिक्वेस्ट को मिलने वाले पहुंच से इनकार वाले जवाब Q3 2025 के 5.98% से बढ़कर Q3 2026 में 13.47% हो गए। सर्च और यूजर-ट्रिगर्ड रिक्वेस्ट एआई क्रॉल गतिविधि में Q2 2026 के 6.51% से बढ़कर Q3 2026 में 11.92% पहुंच गए।*

*खारिज की गई एआई बॉट रिक्वेस्ट की हिस्सेदारी (Q3 2025 बनाम Q3 2026) और एआई क्रॉल गतिविधि में सर्च/यूजर-ट्रिगर्ड रिक्वेस्ट की हिस्सेदारी (Q2 बनाम Q3 2026)। क्लाउडफ्लेयर राडार का डेटा TechnologyChecker.io द्वारा विश्लेषित, ज़ेन मीडिया की रिलीज़ के मुताबिक, 9 अक्टूबर 2026। Q3 2026 के आंकड़े प्रारंभिक हैं। [2]*

## चेकआउट पर अटके एजेंट

इन ब्लॉक्स की कीमत उपभोक्ता पहले ही चुकाने लगे हैं। [अमेज़न](https://theinference.org/markets/companies/amazon) अब अपनी रिटेल साइट पर [मेटा](https://theinference.org/markets/companies/meta) के म्यूज़ (Muse) को ब्राउज़ या खरीदारी से रोक देता है। म्यूज़ का पार्टनर वॉलमार्ट एजेंटों को इंसानी सत्यापन (ह्यूमन वेरिफिकेशन) वाले बटनों पर अटका देता है — कंपनी कहती है कि यह अनजाने में हो रहा है। येल्प सारे नॉन-ह्यूमन ट्रैफिक को इनकार कर देता है; एजेंट तभी अंदर आ पाता है जब वह उसके डेटा-लाइसेंसिंग प्रोग्राम में पैसा देता है [1]। मेटा का जवाब एक ओपन एजेंट-टू-बिज़नेस स्टैंडर्ड है, जिसे उसने वॉलमार्ट, स्ट्राइप, [सिएरा](https://theinference.org/markets/companies/sierra), जेनेसिस, रॉकेट, NiCE और [डिकैगन](https://theinference.org/markets/companies/decagon) के साथ मिलकर तैयार किया है — ये आठ नामित पार्टनर अच्छे बॉट को बुरे बॉट से अलग पहचानने पर काम कर रहे हैं [1]।

## ज़मींदार दोनों तरफ सौदा करता है

वेब ट्रैफिक का करीब पांचवां हिस्सा क्लाउडफ्लेयर के ज़रिए गुज़रता है [3], और कंपनी इस दीवार से दोनों तरफ कमाई कर रही है — एक तरफ मार्केटप्लेस है, जहां एआई बॉट जिस डेटा तक पहुंचते हैं उसके लिए पैसे देते हैं; दूसरी तरफ खासतौर पर एआई एजेंटों के लिए बनाए गए एक ब्राउज़र का टेस्ट [1]। जब चाबी बेचने वाली कंपनी भी वही हो, तो कमी पैदा करना ही सेल्स पिच बन जाता है: जितने ज़्यादा एजेंट कंपनी लौटाएगी, उतनी ही ज़्यादा कीमती उसके मार्केटप्लेस से होकर जाने वाली पेड एंट्री बनेगी। एक सुरक्षा फीचर टोल नाके में बदलता जा रहा है — और उस नाके की कतार पर भी वही ऑपरेटर कमान संभालता है।

वेंडर पक्ष का शोर कम है, मगर निशाना तेज़ है। अनाकिन (YC S21) ने [6 अक्टूबर को बिल्डरों के लिए अपनी गाइडलाइन जारी की](https://anakin.io/blog) — उसी दिन टेकक्रंच ने [ब्लॉक की इस लहर पर रिपोर्ट प्रकाशित की](https://techcrunch.com/2026/10/06/the-next-hurdle-for-ai-agents-getting-websites-to-let-them-in/) [4]। कंपनी का वायर (Wire) कैटलॉग 940 से ज़्यादा प्लेटफॉर्म और 4,500 से ज़्यादा एक्शन को घेरता है, और क्लाउडफ्लेयर, अकामाई (Akamai), पेरिमीटरएक्स (PerimeterX) व डेटाडोम (DataDome) के बायपास की सुविधा इसमें पहले से शामिल है — [कंपनी के अपने मार्केटिंग मटेरियल के मुताबिक; यहां इसकी जांच नहीं की गई](https://anakin.io/) [5]। कीमत कुछ ऐसी है: हर स्क्रैप पर 1 क्रेडिट, हर वायर एक्शन पर फ्लैट 2 क्रेडिट, 12 से 900 डॉलर प्रति माह, और [फेल होने वाली जॉब का बिल नहीं बनता](https://anakin.io/pricing) [6]। यह आख़िरी शर्त पूरे बिज़नेस मॉडल की एक छोटी-सी तस्वीर है: डिफॉल्ट सख़्त होते जाएंगे तो DIY एजेंटों के लिए फेल होना ही डिफॉल्ट अनुभव बन जाएगा, और जिन फेल जॉब्स का बिल नहीं बनता, वे पूरा वॉल्यूम उसी की ओर धकेलेंगे जो दीवार पार कराने की गारंटी देता है।

## पैसे का दोराहा

अगर आठ पार्टियों वाला यह स्टैंडर्ड पेड एक्सेस को औपचारिक रूप दे देता है, तो टोल ऑपरेटर दोहरी जीत हासिल करेंगे और बायपास वेंडर दबाव में आकर लाइसेंस्ड पार्टनरशिप की ओर खिसक जाएंगे। ड्राफ्ट का यह दायरा — पेमेंट के लिए स्ट्राइप, रिटेल के लिए वॉलमार्ट, एंटरप्राइज़ एजेंटों के लिए सिएरा — संकेत है कि इरादे गंभीर हैं [1]। और अगर स्टैंडर्ड वहीं अटक गया, तो खाई और गहरी हो जाएगी। हर हाल में, एजेंटों को जिस फ्री वेब का वादा किया गया था, उस पर नई कीमत लग रही है — एक-एक 403 के साथ।

## Takeaway

एजेंटों की मांग बढ़ती रही, इसके बावजूद क्लाउडफ्लेयर के डिफॉल्ट ब्लॉक ने एक साल में एआई बॉट रिक्वेस्ट का इनकार 5.98% से बढ़ाकर 13.47% पहुंचा दिया। फायदा दीवार के दोनों तरफ है: एक तरफ टोल वसूलने वाला ऑपरेटर जो पैसे लेकर एंट्री देता है, दूसरी तरफ अनाकिन जैसे बायपास वेंडर्स जो दीवार पार कराने का सौदा बेचते हैं।

## Sources

1. [TechCrunch, The next hurdle for AI agents: getting websites to let them in, 6 October 2026](https://techcrunch.com/2026/10/06/the-next-hurdle-for-ai-agents-getting-websites-to-let-them-in/)
2. [Yahoo Finance / Zen Media press release, AI Crawlers Turned Away More Than Twice as Often, 9 October 2026](https://finance.yahoo.com/technology/ai/articles/ai-crawlers-turned-away-more-110000504.html)
3. [PPC Land, Cloudflare redesigns Radar, fed by about 20% of web traffic, 9 October 2026](https://ppc.land/cloudflare-redesigns-radar-fed-by-about-20-of-web-traffic/)
4. [Anakin.io blog index, Cloudflare Now Blocks AI Agents by Default: What Builders Need to Know, 6 October 2026](https://anakin.io/blog)
5. [Anakin.io homepage, product and capability claims, fetched 9 October 2026](https://anakin.io/)
6. [Anakin.io pricing page, credit rates and plan range, fetched 9 October 2026](https://anakin.io/pricing)


---

Q3 में क्लाउडफ्लेयर ने 13.47% एआई बॉट रिक्वेस्ट खारिज कीं, पिछले साल यह दर 5.98% थी; अब वेंडर्स एजेंटों को अंदर घुसने का रास्ता बेच रहे हैं — The Inference. Canonical: https://theinference.org/article/cloudflare-blocked-13-47-of-ai-bot-requests-in-q3-up-from-5-98-vendors-sell-agents-the-way-in/hi