تعرض Microsoft Clarity الآن طلبات الروبوت التي تتعارض مع قواعد عنوان URL لموقع الويب في لوحة معلومات Bot Analytics الخاصة بالأداة، حسبما أعلنت الشركة في منشور بالمدونة.
ستقوم Clarity بحساب هذه الطلبات وعرضها كنسبة مئوية من إجمالي نشاط الروبوت خلال إطار زمني محدد وإضافتها إلى أدوات رؤية الذكاء الاصطناعي الموجودة في لوحة المعلومات، والتي بدأت في شهر مايو في عرض الاستعلامات الأساسية خلف استشهادات الذكاء الاصطناعي.
ما يظهره عرض المخالفات
عندما يقوم الروبوت بتقديم طلب إلى موقع ويب متصل بـ Clarity، تقوم الأداة الآن بالتحقق من هذا الطلب مقابل توجيهات robots.txt الخاصة بالموقع لتحديد ما إذا كان المسار غير مسموح به.
يتم بعد ذلك حساب طلبات الروبوت غير المسموح بها وعرضها كنسبة مئوية من إجمالي نشاط الروبوت خلال إطار زمني محدد.
يسمح الوضوح لمالكي المواقع بتصفية طلبات الروبوت التي يظهرها مشغل الروبوت، واسم الروبوت، ونوع نشاط الطلب، وعناوين URL والمسارات المطلوبة، لمقارنة وتباين الأنماط في برامج الزحف المعروفة باتباع القواعد مع تلك التي لا تتبعها.
ويتم ذلك عن طريق الانتقال إلى عرض جنبًا إلى جنب لمقارنة برامج الزحف التي تعتبر بشكل عام متوافقة مع تلك التي تظهر الانتهاكات.
كيفية تشغيله
لا يتم تنشيط الميزة تلقائيًا لجميع المواقع ويجب تمكينها بواسطة مسؤول مشروع الموقع في قسم رؤية الذكاء الاصطناعي في إعدادات المشروع، وتحديدًا للمواقع التي تستخدم شبكة CDN مدعومة.
تتضمن شبكات CDN المدعومة Fastly وAmazon CloudFront وCloudflare وAzure Front Door وAkamai. يتم أيضًا دعم مواقع WordPress التي تستخدم أحدث مكون إضافي من Microsoft Clarity.
لماذا هذا مهم؟
ومع المخاوف المتعلقة ببرامج زحف الذكاء الاصطناعي التي تستهلك موارد الخادم وتحريف التحليلات، فإن القدرة على رؤية هذا النشاط أمر مهم.
وبما أن ميزة Clarity مجانية، فهي طريقة مجانية لمراقبة ما إذا كانت برامج الزحف تلتزم بهذه القواعد أم لا. فهو يخبرك فقط أن الطلبات حدثت، وليس السبب.
لا تغطي هذه البيانات سوى الطلبات التي وصلت إلى المسارات التي لا يسمح بها ملف robots.txt الخاص بالموقع. يعد ملف Robots.txt بمثابة ملف استشاري، وليس شيئًا يمنع أي شيء، لذا يقوم Clarity بتسجيل الطلبات التي تم تنفيذها بدلاً من تلك التي تم إيقافها.
تقر هذه الخطوة أيضًا بأن التحليل اليدوي لسجلات الخادم لطلبات الروبوت واختبار عناوين URL يدويًا مقابل ملف robots.txt لتحديد الطلبات غير المسموح بها غير قابل للتوسع، حيث تقوم Clarity الآن تلقائيًا بحساب عدد الطلبات الواردة من برامج الزحف التي تنتهك قواعد الموقع.
التطلع إلى الأمام
تتمتع مواقع الويب الآن بطرق آلية أكثر دقة لتقييم مدى اتباع قواعد ملف robots.txt.
والسؤال الكبير هو ما إذا كان تسهيل قياس هذا السلوك سيغير سلوك برامج الزحف أم أنه سيساعد مالكي المواقع فقط في الاحتفاظ بسجل أكثر وضوحًا لما يحدث.
اكتشاف المزيد من قمم التجارية للأعمال
اشترك للحصول على أحدث التدوينات المرسلة إلى بريدك الإلكتروني.
