كلاودفلير تُطلق خيار منع تدريب الذكاء الاصطناعي مع الحفاظ على ظهور المواقع في محركات البحث

في تدوينة نُشرت على مدونة شركة كلاودفلير في 15 سبتمبر 2026، أعلنت الشركة عن ميزة جديدة تُسمّى «منع تدريب الذكاء الاصطناعي». تُتيح هذه الميزة لمالكي المواقع الاستمرار في الظهور في نتائج محركات البحث التقليدية مع رفض صريح أن تُستَخدم الزواحف نفسها لجمع المحتوى بغرض تدريب نماذج الذكاء الاصطناعي.

الهدف من هذا الإجراء هو استهداف فئة محددة من الروبوتات التي تقوم بمهام فهرسة البحث التقليدي وتجمع البيانات لأغراض التعلم الآلي في آنٍ واحد. وقد أصبحت هذه الزواحف متعددة الاستخدام محور نقاش واسع، لأن طلباً واحداً يمكن أن يخدم هدفين تجاريين وأخلاقيين مختلفين تماماً.

أهمية التمييز بين الروبوتات

تشير قياسات داخلية لدى كلاودفلير إلى أن أقل من واحد بالمئة من الملايين من المواقع التي تحميها الشركة تقوم بحجب جميع روبوتات البحث بالكامل. بالمقابل، قام 17 ٪ من تلك المواقع بتمكين آلية واحدة على الأقل لمنع تدريب الذكاء الاصطناعي، ما يُظهر رغبة واضحة في التحكم الدقيق في كيفية استغلال محتواها.

ملف robots.txt التقليدي لا يمكنه إلا التعبير عن تفضيل عام؛ فهو لا يُوثّق هوية الزاحف ولا يتحقق من هدفه المقصود. وبالتالي، يمكن لأي مشغل يختار تجاهل الملف أن يواصل جمع المحتوى دون عواقب تقنية أو قانونية، ما يثير مخاوف حول استخدام البيانات في نماذج الذكاء الاصطناعي دون إذن صريح.

كيف يعمل حل كلاودفلير تقنياً

توضح كلاودفلير أنها ستضيف تفضيل الموقع إلى البيانات التعريفية الخاصة به، ثم تقوم بتصنيف كل روبوت يمر عبر شبكتها بناءً على هذا التفضيل. الروبوتات التي تتجاهل علامة «منع تدريب الذكاء الاصطناعي» تُحَظَر تلقائياً، وتُسجَّل أنشطتها في منصة Cloudflare Radar لضمان الشفافية وتوفير سجل يُمكن للمالكين مراجعته.

تُعرّف علامة «المسؤول» التي تعتمدها الشركة مجموعة من المتطلبات للزحف المسؤول، تشمل آلية لرفض التدريب، وإمكانية مستقبلية لرفض الملخصات التي يولدها الذكاء الاصطناعي، ورؤية رفض لكل عنوان URL، وضمان أن الرفض لا يؤثر على فهرسة البحث العادية. بهذه الطريقة، يُحافظ الموقع على ظهوره في نتائج البحث مع حماية محتواه من الاستخدام غير المرغوب فيه.

• أبل، جوجل ومايكروسوفت قد استوفوا أو تعهدوا بالاستيفاء لمعايير «المسؤول» ضمن جدول زمني محدد.
• أمازون، أنثروبيك، ميتا وOpenAI يفصلون بالفعل بين روبوتات البحث والتدريب وفق تصنيف كلاودفلير.
• ضوابط كلاودفلير تميز ثلاث فئات: بحث، تدريب، ووكيل.
• إعداد «منع تدريب الذكاء الاصطناعي» يطبق فقط على فئة التدريب ولا يمتد بعد إلى الوكلاء الموجهين من قبل المستخدم.

التمييز بين البحث والتدريب يُعد حاسماً لأنه يحافظ على القيمة الأساسية لاكتشاف الويب. يمكن للمواقع الاستمرار في الظهور في نتائج جوجل أو بينغ أو غيرها من محركات البحث مع الإشارة إلى أن محتواها لا ينبغي إعادة استعماله لتدريب نماذج واسعة النطاق.

خارطة الطريق المستقبلية

أشارت كلاودفلير إلى أن المرحلة التالية ستركز على التحكم في كمية محتوى الصفحة التي تظهر في الملخصات التي يولدها الذكاء الاصطناعي. هذه القدرة مستقلة عن رفض التدريب وستعالج المخاوف المتعلقة بظهور المحتوى في الوكلاء الحواريين مثل ChatGPT وClaude.

ستُطوّر الشركة أدوات تسمح للمالكين بتحديد ما إذا كان يُسمح للذكاء الاصطناعي باقتباس فقرات معينة أو إخفائها تماماً من الملخصات، ما يفتح باباً جديداً لتخصيص حقوق الاستخدام وتفادي استغلال المحتوى دون موافقة صريحة.

بالنسبة للمنظمات الناطقة بالعربية، الأثر العملي فوري. من خلال تفعيل خيار «منع تدريب الذكاء الاصطناعي»، يمكن للشركة الحفاظ على أداء تحسين محركات البحث (SEO) مع إرسال إشارة تقنية واضحة لمزودي الذكاء الاصطناعي بأن صفحاتها محجوزة للتدريب.

توفر منصة Radar مسار تدقيق يُساعد فرق الشؤون القانونية والامتثال على إظهار الالتزام بسياسات استخدام البيانات الناشئة، ما يُسهل على المؤسسات إثبات شفافية ممارساتها أمام الجهات الرقابية.

من الناحية التقنية، يعتمد النظام على بروتوكولات HTTP محسّنة تسمح للروبوتات بإرسال طلبات تحقق قبل جمع المحتوى. إذا لم تُظهر الروبوتات العلامة المطلوبة، تُعيد الخوادم ردًا بــ 403 Forbidden وتُسجَّل الحادث في سجلات Radar لتقييم سلوك الروبوتات المستقبلية.

تُشير التقارير الأولية إلى أن عددًا من المواقع الإخبارية العربية الكبيرة قد بدأ بالفعل في تطبيق هذه الميزة، مع ملاحظة انخفاض طفيف في طلبات الزحف غير المرغوب فيها دون أي تأثير ملحوظ على ترتيبها في نتائج البحث.

تحديات وتوقعات المستقبل

رغم أن التقنية تبدو واعدة، إلا أن هناك تحديات تتعلق بتوحيد المعايير عبر مختلف مزودي الخدمات السحابية ومحركات البحث. يتطلب الأمر تعاوناً دولياً لتحديد تعريف موحد لـ«الروبوت المسؤول» وضمان احترامه عبر جميع المنصات.

من المتوقع أن تُصبح هذه الأنظمة جزءاً لا يتجزأ من سياسات الخصوصية والامتثال في السنوات القليلة القادمة، خاصة مع تزايد التشريعات التي تُلزم الشركات بحماية البيانات من الاستغلال غير المصرح به في نماذج الذكاء الاصطناعي.

في الختام، يمثل خيار «منع تدريب الذكاء الاصطناعي» خطوة رئيسية نحو تحقيق توازن بين استفادة الويب من محركات البحث وحماية حقوق الملكية الفكرية للمحتوى، مع إتاحة مساحة لتطوير حلول أكثر دقة في المستقبل القريب.