حظر «كلاودفلير» لبوتات الذكاء الاصطناعي يوقف الجميع الآن... إلا جوجل وأبل ومايكروسوفت
انقضى الأسبوع الذي حددته «كلاودفلير» لتحويل حظر تدريب الذكاء الاصطناعي لدى عملائها إلى تفضيلات في ملف robots.txt. لم يعد مطلوباً من جوجل وأبل ومايكروسوفت سوى احترام هذه التفضيلات، فيما تظل برامج زحف التدريب التابعة لغيرها موقوفة عند حافة الشبكة.
Vincent Jiang · 3 min read
قالت كلاودفلير في رسالتها الإلكترونية إلى العملاء بتاريخ 16 سبتمبر 2026 إن إعدادات «Block AI Bots» القديمة ستنتقل تلقائياً خلال الأسبوع التالي، وإن المفتاح سيختفي من لوحة التحكم فور اكتمال عملية الانتقال 1. وقد انقضى ذلك الأسبوع. ما نقر عليه الناشرون بوصفه حظراً لم يعد بالنسبة إلى الشركات الثلاث الأكثر أهمية سوى ملاحظة مهذبة في ملف نصي.
ما الذي تحوّل إليه الحظر
قاعدة التحويل محسومة. يستقر كل مفتاح قديم عند «السماح للبحث» (Search Allow)، و«عدم السماح بتدريب الذكاء الاصطناعي» (Disallow AI Training) للتدريب، وحظر الوكلاء على الصفحات التي تعرض إعلانات 12. يكتب خيار «عدم السماح بتدريب الذكاء الاصطناعي» توجيهاً بمنع التدريب في ملف robots.txt، غير أن Googlebot وApplebot وBingbot تواصل جلب المحتوى، لأن الشركات الثلاث تشغّل برنامج زحف واحداً يخدم فهرسة البحث وتدريب النماذج على حد سواء 12. والفجوة التي يعالجها هذا الخيار حقيقية: 17% من المواقع على شبكة «كلاودفلير» تحظر التدريب بشكل ما، وأقل من 1% تحظر برامج زحف البحث، فيما تقف الشبكة نفسها أمام أكثر من خُمس الويب 13.
حظر التدريب شائع على شبكة «كلاودفلير»... وحظر البحث نادر
Data
| Value | |
|---|---|
| مواقع تحظر تدريب الذكاء الاصطناعي | 17% |
| مواقع تحظر برامج زحف البحث | <1% |
| الويب خلف شبكة «كلاودفلير» | >20% |
الإنفاذ أصبح على درجتين
لا يزال الإعداد يحجب أحدهم. فبرامج زحف التدريب التي تشغّلها «أوبن إيه آي» و«أنثروبيك» و«ميتا» و«أمازون» تُحظر حظرًا تامًا عند حافة شبكة «كلاودفلير» 4. في المقابل، تواصل جوجل وأبل ومايكروسوفت جلب المحتوى بموجب وسم «المساءلة» (Accountable) من «كلاودفلير»، وما يحدث للصفحة بعد ذلك يتوقف على احترام الشركة المشغِّلة للملف 14. ومايكروسوفت نفسها لا تستطيع حتى قراءة القاعدة الجديدة قبل أن يصل دعمها لملف robots.txt، وهو مستهدف مطلع عام 2027 12.
«المساءلة» تصنيف أطلقته «كلاودفلير» بنفسها، وليس شهادة من جهة خارجية 4. ومُنح الوسم استنادًا إلى قدرات تتوفر لدى كل شركة مشغِّلة بالفعل، مع التزامات محددة بجدول زمني لما تبقى 12. وفي أغسطس، اشترط الشرط الرابع على المشغّل أن «يُظهر علنًا» أن عدم السماح بالتدريب لا يضر بنتائج البحث؛ أما نسخة سبتمبر فتطلب تأكيدًا 51.
دليل «كلاودفلير» لا يزال يَعِد بالعكس
لا تزال وثائق «كلاودفلير» الرسمية، المحدَّثة آخر مرة في 1 يوليو 2026 تقول إن برامج الزحف ذات الأغراض المختلطة «ستُحظر أيضًا بواسطة جميع الإعدادات التي تحظر تدريب الذكاء الاصطناعي، بما في ذلك خيار Block AI bots القديم» 6. وتعرض تلك الصفحة ثلاثة خيارات لكل عنصر تحكم: «السماح»، و«الحظر على الصفحات التي تعرض إعلانات»، و«الحظر» 6. أما المنتج المطروح فعليًا فيحمل خيارًا رابعًا هو «عدم السماح بتدريب الذكاء الاصطناعي»، لا يذكره الدليل إطلاقًا 1. والسلوك الفعلي هو عكس ما تنص عليه الصفحة التي لا تزال «كلاودفلير» تنشرها.
السبيل الوحيد للعودة إلى حظر صارم هو خيار «الحظر»، الذي يقطع الموقع الآن كليًا عن بحث جوجل وأبل ومايكروسوفت 12. وحظر Bingbot يُخرج الموقع دفعة واحدة من بينغ وياهو وكوبايلوت 1.
الإيصال يصل بعد أسابيع... لا الآن
التقارير على مستوى الروابط (URL)، وهي الآلية المرصودة للكشف عن الصفحات التي استُخدمت رغم حظرها، لا تزال على بعد أسابيع لدى جوجل، ومقررة العام المقبل لدى أبل 124. وحتى وصولها، يُقرأ دفتر الحسابات على وجه واحد: الناشرون يحتفظون بزياراتهم من البحث، والعمالقة يحتفظون بمخزون المحتوى، و«كلاودفلير» تحتفظ بالطرفين كعملاء، وبرامج الزحف الوحيدة التي لا تزال تُوقف بالقوة تخص منافسي العمالقة في الذكاء الاصطناعي 4. وتأتي التلخيصات في المرحلة التالية، مع ضوابط مركزية مستهدفة مطلع عام 2027 13.
How this brief was made
01Gathered & sourced272 channels · 1,762 articles▾
Agents swept 272 channels and ingested 1,762 articles, then de-duplicated and ranked them for signal.
02Verified & cross-validated6 claims · 22 data feeds▾
Every one of 6 load-bearing claims was checked against primary sources, with 22 live data feeds reconciling the figures and charts.
- 1PPC Land, "Cloudflare drops planned Googlebot block for sites refusing AI training", 27 September 2026
- 2Search Engine Journal, Matt G. Southern, "Cloudflare Lets Sites Disallow AI Training Without Blocking Googlebot", 15 September 2026
- 3Best Media Info, "Cloudflare separates AI training opt-outs from search crawling for publishers", 16 September 2026
- 4heise online, Moritz Förster, "Google search yes, model training no: New Cloudflare rules", 18 September 2026
- 5Cloudflare blog, Jin-Hee Lee, "Say it once: introducing Bot Preference Sync", 21 August 2026, updated 15 September 2026
- 6Cloudflare documentation, "Block AI Bots", last updated 1 July 2026
03Reviewed & edited1 human editor▾
One editor read the draft against the evidence, tuned the framing, and signed off before it shipped.
Become a contributor
Reporting on the business of AI and want it read? We take pitches from outside contributors who bring primary sources and a number worth arguing about.
Deepdive
AI-generated from this story and its cited sources. Not investment advice.



