ستقوم CloudFlare الآن بمنع الروبوتات من الذكاء الاصطناعي من تزحف مواقع عملائها بشكل افتراضي
كتب – المحرر الإفتراضي
ومع ذلك ، فإن هذه الأنظمة لا توفر نفس الفرص لتحقيق الدخل والائتمان مثل محركات البحث تاريخيا. تستمد نماذج الذكاء الاصطناعى من قدر كبير من البيانات على الويب لإنشاء مخرجاتها ، ولكن لا يتم الفضل في مصادر البيانات هذه ، مما يحد من قدرة المبدعين على كسب المال من عملهم. قد تتضمن محركات البحث التي تتميز بإجابات تم إنشاؤها من الذكاء الاصطناعي روابط إلى المصادر الأصلية ، ولكنها قد تقلل أيضًا من اهتمام الأشخاص بالنقر على مواقع أخرى ويمكن أن تدخل في مستقبل “نقر صفري”.
“تقليديًا ، كان الاتفاق غير المعلن هو أن محرك البحث يمكنه فهرسة المحتوى الخاص بك ، ثم سيظهرون الروابط ذات الصلة باستعلام معين ويرسل لك حركة المرور إلى موقع الويب الخاص بك” ، كتب ألين ، رئيس خصوصية الذكاء الاصطناعى ، والتحكم ، والوسائط ، في رسالة بريد إلكتروني إلى رسالة بريد إلكتروني مراجعة تكنولوجيا معهد ماساتشوستس للتكنولوجيا. “هذا يتغير بشكل أساسي.”
بشكل عام ، يرغب المبدعون والناشرين في تحديد كيفية استخدام محتوىهم ، وكيف يرتبط بهم ، وكيف يتم دفعهم مقابل ذلك. تدعي Cloudflare أن عملائها يمكنهم الآن السماح أو عدم السماح بالزحف لكل مرحلة من مراحل دورة حياة الذكاء الاصطناعى (على وجه الخصوص ، التدريب ، التثبيت ، والاستدلال) وزملاؤ القائمة البيضاء المحددة. يمكن للعملاء أيضًا تعيين معدل لمقدار تكلفة الروبوتات من الذكاء الاصطناعي لزحف موقع الويب الخاص بهم.
في بيان صحفي من CloudFlare ، أعربت شركات الوسائط مثل أسوشيتد برس والوقت والمنتديات مثل Quora و Stack Overflow عن دعمها لهذه الخطوة. وقال الرئيس التنفيذي لشركة Stack Overflow Prashanth Chandrasekar في البيان: “يجب تعويض منصات المجتمع التي تعود إلى Fudle LLMs لمساهماتها حتى يتمكنوا من الاستثمار في مجتمعاتهم”.
من المفترض أن يطاعى الزواحف توجيهات موقع ويب معين (المقدمة من خلال ملف Robots.txt) لتحديد ما إذا كان بإمكانهم الزحف هناك ، ولكن تم اتهام بعض شركات الذكاء الاصطناعي بتجاهل هذه التعليمات.
لدى CloudFlare بالفعل نظام التحقق من الروبوت حيث يمكن لرواد ويب منظمة العفو الدولية إخبار مواقع الويب التي تعمل من أجلها وما يريدون القيام به. بالنسبة لهؤلاء ، تأمل CloudFlare أن يتمكن نظامها من تسهيل المفاوضات الجيدة بين شركات الذكاء الاصطناعى وأصحاب مواقع الويب. بالنسبة للزحفات الأقل صدقًا ، تخطط Cloudflare لاستخدام خبرتها في التعامل مع هجمات إنكار الخدمة المنسقة من الروبوتات لإيقافها.
وكتب ألن: “إن زاحف الويب الذي يمر عبر الإنترنت يبحث عن أحدث محتوى هو مجرد نوع آخر من الروبوت – لذلك كل عملنا لفهم أنماط حركة المرور والشبكات للبروتات الخبيثة بوضوح تساعدنا على فهم ما يفعله الزاحف”.
قامت CloudFlare بالفعل بتطوير طرق أخرى لردع الزواحف غير المرغوب فيها ، مثل السماح للمواقع الإلكترونية بإرسالها إلى مسار صفحات الويب المزيفة التي تم إنشاؤها من الذكاء الاصطناعى لإهدار جهودهم. على الرغم من أن هذا النهج سيظل يتقدم بطلب للحصول على الجهات الفاعلة السيئة حقًا ، إلا أن الشركة تقول إنها تأمل أن تتمكن خدماتها الجديدة من تعزيز علاقات أفضل بين شركات الذكاء الاصطناعي ومنتجي المحتوى.
