إن فرض رسوم على روبوت الذكاء الاصطناعي للزحف إلى موقع الويب الخاص بك هو قرار يتعلق بالرؤية، وليس قرارًا بشأن الإيرادات. كل زاحف تضعه خلف نظام حظر الاشتراك غير المدفوع هو خيار بشأن الوكلاء الذين لا يزال بإمكانهم قراءتك، والاستشهاد به، والتوصية به، ومعظم مالكي مواقع الويب على وشك اتخاذ هذا الاختيار دون أن يلاحظوا أنه أصبح من حقهم القيام به. الآلية هي HTTP 402، وهو رمز الحالة الذي تم كتابته على الويب في عام 1997 وظل خاملًا لمدة ثلاثين عامًا تقريبًا. في يوليو 2025، نفضت Cloudflare الغبار عنها لشحن برامج زحف الذكاء الاصطناعي. في 15 يونيو 2026، أضافت AWS نفس الإمكانية إلى جدار الحماية الخاص بها. تبيع الآن اثنتين من أكبر الشركات في مجال البنية التحتية للويب نفس الشيء: كشك تحصيل الرسوم للآلات. السؤال الذي يسلمونه لك هو حول من يمكنك تحمل تكاليف الابتعاد عنه.

كشك رسوم المرور الذي يقرأه الجميع كخط للإيرادات

تضع منشورات الإطلاق الدفع لكل زحف كأموال جديدة، لكن الأمر يتعلق في الواقع بالموافقة. لسنوات، قامت شركات الذكاء الاصطناعي بالزحف إلى شبكة الإنترنت المفتوحة لتدريب النماذج والإجابات الأرضية، وكان أمام مالكي مواقع الويب خياران صريحان: إما ترك الباب مفتوحًا، أو حظر برامج الزحف بالجملة والأمل في الحفاظ على القواعد. الدفع لكل زحف هو الآلية الأولى التي تتيح لموقع الويب قول شيء أكثر دقة من نعم أو لا. يتيح لك تحديد الشروط. وهذا تحول حقيقي حيث الموافقة والسيطرة، وليس البنسات، هي الجائزة الحقيقية.

السبب وراء وجود كل هذا في المقام الأول هو صفقة فاشلة. لمدة 30 عامًا، كانت الصفقة بسيطة: دع الزاحف يدخل، ويقوم بفهرستك، ويعيد الأشخاص مرة أخرى. احتفظت برامج زحف الذكاء الاصطناعي بالنصف الأول وأسقطت الشوط الثاني. إن تفصيل Cloudflare لسبب زحف هذه الروبوتات يضع التدريب في ما يقرب من 80٪ من نشاط روبوت الذكاء الاصطناعي، مع جلب عمليات البحث التي يمكنها في الواقع إرجاع الاقتباس، وهو شريحة صغيرة مما تبقى. والباقي هو الاستخراج الذي يأخذ المحتوى ولا يرسل أي شخص مرة أخرى. لذا، فإن كشك تحصيل الرسوم هذا عبارة عن شبكة تحاول إعادة التفاوض بشأن صفقة توقفت برامج زحف الذكاء الاصطناعي عن الوفاء بها بالفعل.

هنا مكان الاحتفال من منشورات الإعلان وقراءتي له بطرق جزئية. في اللحظة التي يمكنك فيها تعيين الشروط، تصبح الشروط بمثابة مقايضة للرؤية، وهذا هو الجزء الذي تتجاهله منشورات الإطلاق.

من يقوم بشحن برامج الزحف التي تعتمد على الذكاء الاصطناعي، وكيف تعمل الآلية

أطلقت Cloudflare الإصدار الرئيسي الأول في 1 يوليو 2025. ويحدد الناشر سعرًا ثابتًا لكل طلب لنطاقه. عندما يطلب زاحف الذكاء الاصطناعي صفحة ما، فإنه إما يعرض نية الدفع في رؤوس الطلب الخاصة به ويحصل على المحتوى باستجابة 200، أو يحصل على استجابة 402 الدفع المطلوب تحمل السعر. تصف Cloudflare نفسها بأنها تاجر السجل وتدير التسوية، وهو أمر مهم: نظرًا لأن Cloudflare تقع بين برامج الزحف والناشرين، فيمكنها أن تكون بمثابة غرفة مقاصة لكلا الجانبين. عند الإطلاق، كانت الميزة عبارة عن نسخة تجريبية خاصة، وقد قامت Cloudflare بتأطيرها كتجربة أولى، وليس كسوق نهائية.

أضافت AWS نفس الفكرة إلى جدار حماية تطبيقات الويب الخاص بها في 15 يونيو 2026. عندما يطلب زاحف الذكاء الاصطناعي مقالة محمية أو خلاصة بيانات أو أرشيفًا مرخصًا، يمكن لـ AWS WAF إرجاع HTTP 402، ويتم تمرير تفاصيل السعر والدفع عبر بروتوكول x402 كبيان يمكن قراءته آليًا. تتم تسوية الدفع بالعملة المستقرة من خلال وسيط Coinbase، وتوجد عناصر التحكم في WAF Bot Control، ويمكن تعيين التسعير لكل مسار محتوى ولكل نوع روبوت دون لمس رمز موقع الويب. يقوم الآن اثنان من أكبر موفري البنية التحتية على الويب ببيع كشك رسوم للآلات في غضون عام من بعضهما البعض.

إنهم ليسوا وحدهم، على الرغم من أن بقية الحقل يتشكل بشكل مختلف. تدير TollBit نظام حظر الاشتراك غير المدفوع والسوق للروبوتات والوكلاء، حيث تفرض رسومًا على الوصول إلى الذكاء الاصطناعي وفقًا لشروط قائمة على الاستخدام بدلاً من السعر الثابت لكل طلب. تعمل Akamai على تحقيق الدخل من خلال دمج TollBit وSkyfire، اللذين تم الإعلان عنهما في سبتمبر 2025، حتى يتمكن عملاؤها من فرض الرسوم على طبقة الشبكة دون بنائها. أسفل الرسوم الأحدث يوجد x402، وهو معيار Coinbase المفتوح لنفس رمز الحالة HTTP 402. يتم تسويتها بعملة مستقرة ولا تحتاج إلى حساب من وكيل الدفع، الأمر الذي من شأنه أن يزيد من الرسوم من الروبوتات المعروفة والمحددة إلى الروبوتات المجهولة. للحصول على الصورة الكاملة عن برامج الزحف التي تصل إليك، فإن مشهد وكيل مستخدم الذكاء الاصطناعي هو المرجع، لأنه لا يمكنك تسعير روبوت لا يمكنك تسميته.

في جميع هذه المناطق، توجد الرسوم على الحافة، في شبكة CDN وجدار الحماية، وهي نفس الطبقة التي تقرر بالفعل من يدخل. ويتم دمج الدفع والإذن في نقطة تحكم واحدة.

يتم الآن تفكيك صفقة الويب المفتوحة

يتم تفكيك الصفقة التأسيسية للويب المفتوح وبيعها سطرًا تلو الآخر. كانت صفقة الزحف الحر مقابل حركة المرور التي تدعم البحث، والممارسة بأكملها المبنية عليها، تفترض أن الزحف عبارة عن تكلفة يدفعها موقع ويب للحصول على التوزيع. الدفع لكل زحف هو الفاتورة الأولى لعملية الزحف التي لم تعد تُرجع الخدمة بشكل موثوق.

هذا التفكيك له شكل محدد. كان التحكم في الوصول وإعداد الفواتير بمثابة اهتمامات منفصلة، ​​ويتم التعامل معها من خلال أنظمة منفصلة. الآن يجلسون على نفس الحافة، في نفس قاعدة WAF، في نفس لوحة معلومات Cloudflare. جدار الحماية الذي يقرر ما إذا كان الطلب مسموحًا به أصبح هو المقياس الذي يقرر تكلفة الطلب. عندما ينهار الإذن والدفع في طبقة واحدة، يتوقف قرار قبول الزائر عن كونه قرارًا افتراضيًا ويصبح اختيارًا متعمدًا ومكلفًا. هذا هو سؤال الوكيل كزائر، وهو السؤال الموجود ضمن قضية Amazon v. Perplexity حول ما إذا كان الوكيل حتى زائرًا مرخصًا له، وقد تم تحويله من تجريد قانوني إلى إعداد تقوم بتكوينه.

والجميل الذي كان الزاحف يرده لم يختفي؛ لقد تحركت. تعمل أسطح الذكاء الاصطناعي على إرسال الأشخاص مرة أخرى: أدت بيانات Adobe لعام 2026 إلى زيادة حركة المرور المحالة بواسطة الذكاء الاصطناعي إلى تجار التجزئة في الولايات المتحدة بنسبة 393% على أساس سنوي. هذا الرقم هو السبب في أن الرسوم هي قرار الرؤية أولاً والفوترة ثانية واحدة. غالبًا ما يكون الزاحف الذي ستفرض عليه الرسوم والإجابة التي تحيل العميل إليك هما نفس خط الأنابيب.

يعتمد ما إذا كان يجب عليك تحصيل الرسوم على هويتك

إن الناشر الذي يمتلك أرشيفًا عميقًا قابلاً للترخيص، أو منفذًا إخباريًا، أو قاعدة بيانات مرجعية، أو مجموعة بيانات خاصة، لديه شيئان يجعلان فرض الرسوم عقلانيًا: المحتوى الذي يستحق حقًا الدفع مقابله، وبرامج الزحف التي يمكنه رفضها لأن توزيعها لا يعتمد عليها. بالنسبة لذلك المالك، فإن الحصيلة هي النفوذ، واستخدامها سليم.

يوجد موقع ويب للمحتوى أو التجارة يطارد رؤية الذكاء الاصطناعي على الجانب الآخر. بالنسبة لهذا المالك، الزاحف هو التوزيع. إذا قمت بعزله، فقد تجمع بضعة سنتات، أو قد تحذف نفسك من المكان الذي يطرح فيه عملاؤك أسئلتهم الآن. لا تعمل الرسوم إلا عندما يكون هناك شيئين صحيحين في وقت واحد: ما وراءه يستحق الدفع مقابله، والروبوت الذي تحظره هو روبوت لا تحتاج إلى أن تراه. موقع الويب الذي تتمثل استراتيجيته في أن يكون الإجابة التي يقدمها الوكيل يصف زاحفًا لا يمكنه تحمل رسومه. وهذا هو نفس السبب الذي يجعل موقع الويب الآن مصدرًا وليس مكبر صوت: فالقيمة تكمن في أن تُقرأ، وليس في أن تكون محاطًا بأسوار.

لذا فإن الخطوة هي مراقبة الباب أولاً. اكتشف روبوتات الذكاء الاصطناعي التي تصل إليك فعليًا وما الذي تأخذه، وافصل بين تلك التي تغذي الإجابات وترسل الإحالات عن تلك التي تستخرج ولا تعيد شيئًا، وعندها فقط تقرر أين، وما إذا كان سيتم فرض رسوم. هذا هو الاختبار الذي يستحق إجراءه قبل أن يتقاضى أي شخص سنتًا: قم بقياس روبوت واحد على مسار واحد، وشاهد ما يفعله لكل من حجم الزحف الخاص بك ووجودك في الإجابات، ودع النتيجة، وليس الضجيج بعد الإطلاق، هي التي تبلغ سياستك. لا يجب أن تؤثر سلبًا على حركة المرور التي لم تنظر إليها من قبل.

السؤال غير المستقر هو ما إذا كانت الروبوتات المجهولة ستدفع أم لا

لم تظهر أي دراسة عامة حتى الآن مقدار حصة الاقتباس التي يخسرها موقع الويب فعليًا من خلال فرض رسوم على روبوت معين. منطق التكلفة سليم: يمكن للزاحف الذي يقرأك ويغذي إجابة الذكاء الاصطناعي أن يزيلك من تلك الإجابة عندما ترفضها. من غير المعروف مدى حجم التأثير في الممارسة العملية، ولهذا السبب يظل هذا قرارًا تتخذه بناءً على بياناتك الخاصة، وليس وفقًا لقاعدة عامة.

الإشارة التي سأراقبها هي ما إذا كان الدفع الآلي المجهول يصبح حقيقيًا. واليوم، تعتمد النماذج القابلة للتطبيق على برامج الزحف المحددة التي تقدم نية الدفع. طموح x402 هو الدفع دون تسجيل مسبق، وتسويته بالعملة المستقرة، الأمر الذي من شأنه أن يوسع الرسوم لتشمل الغالبية المجهولة من حركة المرور الآلية. إذا نجح ذلك على نطاق واسع، فإن الويب المسعر يصل إلى أبعد بكثير من حفنة من الروبوتات المسماة. إذا بقي الأمر على حاله، فسيظل الدفع لكل زحف أداة لكبار الناشرين وفضولًا للجميع. أي من هذه الأمور يتحقق هو الذي يقرر ما إذا كان كشك رسوم المرور مكانًا مناسبًا أم الشكل الجديد للطريق.

وفي كلتا الحالتين، تم بناء الكشك، ومن حقنا تشغيله. الفاتورة التي يمكنك رؤيتها هي التي يدفعها الزاحف. الفاتورة التي لا تستطيع رؤيتها هي الإجابة التي تختفي منها. قرر أي واحد تشاهده.

المزيد من الموارد:


تم نشر هذا المنشور في الأصل على No Hacks.


صورة مميزة: رومان سامبورسكي / شاترستوك


اكتشاف المزيد من قمم التجارية للأعمال

اشترك للحصول على أحدث التدوينات المرسلة إلى بريدك الإلكتروني.

شاركها.
اترك تعليقاً