اختر منطقتك 
في تحليل منفصل أجري هذا الأسبوع، وجد الصحفي المتخصص في البيانات بن ويلش أن ما يزيد قليلاً على ربع مواقع الأخبار التي استطلعت آراءها (294 من 1167 مطبوعة ناطقة باللغة الإنجليزية في الولايات المتحدة) تحظر Applebot-Extended. وبالمقارنة، وجد ويلش أن 53 في المائة من مواقع الأخبار في العينة التي شملها تحظر روبوت OpenAI. قدمت جوجل روبوتها الخاص بالذكاء الاصطناعي، Google-Extended، في سبتمبر/أيلول الماضي؛ وقد تم حظره من قبل ما يقرب من 43 في المائة من تلك المواقع، وهي علامة على أن Applebot-Extended ربما لا يزال تحت الرادار. وكما يقول ويلش لـ WIRED، فإن الرقم “يتحرك تدريجيًا” إلى الأعلى منذ أن بدأ البحث.
ويدير ويلش مشروعًا جاريًا لمراقبة كيفية تعامل وسائل الإعلام الإخبارية مع وكلاء الذكاء الاصطناعي الرئيسيين. ويقول: “لقد نشأ نوع من الانقسام بين ناشري الأخبار حول ما إذا كانوا يريدون حظر هذه الروبوتات أم لا. ليس لدي إجابة على سبب اتخاذ كل مؤسسة إخبارية لقرارها. من الواضح أننا نستطيع أن نقرأ عن العديد منهم الذين يعقدون صفقات ترخيص، حيث يتلقون أموالًا مقابل السماح للروبوتات بالدخول – ربما يكون هذا عاملاً”.
في العام الماضي، ذكرت صحيفة نيويورك تايمز أن شركة أبل كانت تحاول إبرام صفقات الذكاء الاصطناعي مع الناشرين. ومنذ ذلك الحين، أعلنت شركات منافسة مثل OpenAI وPerplexity عن شراكات مع مجموعة متنوعة من منافذ الأخبار والمنصات الاجتماعية ومواقع الويب الشهيرة الأخرى. يقول جون جيلهام مؤسس Originality AI: “من الواضح أن العديد من أكبر الناشرين في العالم يتبنون نهجًا استراتيجيًا. أعتقد أنه في بعض الحالات، هناك استراتيجية عمل متضمنة – مثل حجب البيانات حتى يتم وضع اتفاقية شراكة”.
هناك بعض الأدلة التي تدعم نظرية جيلهام. على سبيل المثال، اعتادت مواقع شركة كوندي ناست على حظر برامج الزحف على الويب الخاصة بشركة أوبن إيه آي. وبعد أن أعلنت الشركة عن شراكة مع أوبن إيه آي الأسبوع الماضي، رفعت الحظر عن برامج الزحف على الويب الخاصة بالشركة. (رفضت شركة كوندي ناست التعليق على هذا التقرير). وفي الوقت نفسه، قالت المتحدثة باسم شركة بوزفيد جوليانا كليفتون لمجلة وايرد إن الشركة، التي تحظر حاليًا برنامج أبل بوت إكستينديد، تضع كل برنامج زحف على الويب باستخدام الذكاء الاصطناعي يمكنها التعرف عليه في قائمة الحظر الخاصة بها ما لم يدخل مالكها في شراكة – مدفوعة الأجر عادةً – مع الشركة، التي تمتلك أيضًا صحيفة هافينجتون بوست.
نظرًا لأن ملف robots.txt يحتاج إلى التحرير يدويًا، وهناك العديد من وكلاء الذكاء الاصطناعي الجدد الذين ظهروا لأول مرة، فقد يكون من الصعب الاحتفاظ بقائمة حظر محدثة. يقول جافين كينج، مؤسس Dark Visitors: “الناس لا يعرفون ما الذي يجب حظره”. تقدم Dark Visitors خدمة مجانية تقوم بتحديث ملف robots.txt الخاص بموقع العميل تلقائيًا، ويقول كينج إن الناشرين يشكلون جزءًا كبيرًا من عملائه بسبب مخاوف حقوق النشر.
قد يبدو ملف robots.txt بمثابة مجال غامض لمشرفي المواقع الإلكترونية، ولكن نظراً لأهميته الكبيرة بالنسبة لناشري المحتوى الرقمي في عصر الذكاء الاصطناعي، فقد أصبح الآن مجالاً للمديرين التنفيذيين في وسائل الإعلام. وقد علمت مجلة WIRED أن اثنين من الرؤساء التنفيذيين لشركات إعلامية كبرى يقرران بشكل مباشر أي الروبوتات يجب حظرها.
وقد أشارت بعض المنافذ بشكل صريح إلى أنها تحظر أدوات استخراج البيانات من خلال الذكاء الاصطناعي لأنها لا تمتلك شراكات حاليًا مع مالكيها. وتقول لورين ستارك، نائبة الرئيس الأولى للاتصالات في شركة فوكس ميديا: “نحن نحظر Applebot-Extended في جميع ممتلكات فوكس ميديا، كما فعلنا مع العديد من أدوات استخراج البيانات من خلال الذكاء الاصطناعي الأخرى عندما لم يكن لدينا اتفاقية تجارية مع الطرف الآخر. نحن نؤمن بحماية قيمة أعمالنا المنشورة”.
