كيفية إزالة صفحة ويب من جوجل

لم تتغير أسباب إزالة صفحة من نتائج بحث Google كثيرًا منذ أن نشرت هذه المقالة لأول مرة في عام 2023. تشمل الأمثلة الصفحات التي تحتوي على معلومات سرية أو مميزة أو قديمة. ومع ذلك فقد تطورت الأدوات والتكتيكات.

ها هي نسختي المحدثة.

إزالة مؤقتة

تعد الحاجة إلى إزالة عناوين URL من Google أمرًا ملحًا عندما يتم (1) اختراق الموقع باستخدام برامج ضارة أو محتوى غير مشروع أثناء فهرسته (حتى التصنيف) أو (2) الكشف عن غير قصد عن معلومات خاصة يقوم عملاق البحث بفهرستها بعد ذلك.

أسرع طريقة لإخفاء عناوين URL عن الباحثين هي عبر أداة إزالة عناوين URL من Google في قسم “الفهرسة” في Search Console. هناك، يمكنك إزالة عنوان URL واحد أو فئة بأكملها.

تعالج Google هذه الطلبات بسرعة حسب تجربتي، ولكنها لا تقوم بإلغاء فهرستها بشكل دائم. وبدلاً من ذلك، يقوم بإخفاء عناوين URL من نتائج البحث لمدة ستة أشهر تقريبًا.

هناك ميزة مشابهة في أدوات مشرفي المواقع في Bing، تسمى “حظر عناوين URL”، تخفي الصفحات من بحث Bing لمدة 90 يومًا تقريبًا.

يؤدي “حظر عناوين URL” في أدوات مشرفي المواقع Bing إلى إخفاء الصفحات من بحث Bing لمدة 90 يومًا تقريبًا. انقر على الصورة للتكبير.

دائم

تعمل عدة خيارات على إزالة عناوين URL نهائيًا من فهرس Google.

احذف الصفحة من موقعك

سيؤدي حذف صفحة من خادم الويب الخاص بك إلى إلغاء فهرستها بشكل دائم. بعد الحذف، قم بإعداد رمز حالة HTTP 410 “ذهب” بدلاً من 404 “لم يتم العثور عليه”. امنح Google بضعة أيام لإعادة الزحف إلى الموقع واكتشاف رمز 410 وإزالة الصفحة من فهرسها.

لاحظ أن Google لا تشجع استخدام عمليات إعادة التوجيه لإزالة الصفحات ذات القيمة المنخفضة، حيث ترسل هذه الممارسة إشارات سيئة إلى الوريث.

بالإضافة إلى ذلك، توفر Google نموذجًا لإزالة المعلومات الشخصية من نتائج البحث.

أضف noindex علامة

تحترم محركات البحث دائمًا تقريبًا noindex علامة التعريف. سوف تقوم روبوتات البحث بالزحف إلى أ noindex الصفحة، ولكن لن يتم تضمينها في نتائج البحث.

في تجربتي، سوف يتعرف Google على الفور على أ noindex العلامة الوصفية بمجرد الزحف إلى الصفحة. لاحظ أن العلامة تزيل الصفحة من نتائج البحث، وليس الموقع. تظل الصفحة قابلة للوصول من خلال روابط أخرى، داخلية وخارجية.

من غير المحتمل أن تقوم علامة noindex بإزالة الصفحة من LLMs مثل ChatGPT وClaude وPerplexity، حيث لا تحترم هذه الأنظمة الأساسية دائمًا noindex العلامات أو حتى استثناءات ملف robots.txt. يعد حذف الصفحات من موقعك هو أسلوب الإزالة المؤكد.

حماية كلمة المرور

فكر في إضافة كلمة مرور إلى صفحة منشورة لمنع الوصول إليها بشكل عام. لا يستطيع Google الزحف إلى الصفحات التي تتطلب كلمات مرور أو أسماء مستخدمين.

لن تؤدي إضافة كلمة مرور إلى إزالة الصفحة المفهرسة. أ noindex ومع ذلك، سوف العلامة.

إزالة الروابط الداخلية

قم بإزالة جميع الروابط الداخلية للصفحات التي لا تريد فهرستها. ولا ترتبط بالصفحات المحمية بكلمة مرور أو المحذوفة؛ كلاهما يضر بتجربة المستخدم. ركز دائمًا على الزوار من البشر، وليس على محركات البحث وحدها.

ملف الروبوتات.txt

يمكن لملفات Robots.txt أن تمنع Google (وبرامج الروبوت الأخرى) من الزحف إلى صفحة (أو فئة). لا يزال من الممكن فهرسة الصفحات المحظورة عبر ملف robots.txt وتصنيفها إذا تم تضمينها في خريطة الموقع أو ربطها بطريقة أخرى. جوجل لن تواجه أ noindex وضع علامة على الصفحات المحظورة لأنه لا يمكنه الزحف إليها.

يمكن لملف robots.txt توجيه برامج زحف الويب لتجاهل، على سبيل المثال، صفحات تسجيل الدخول أو الأرشيفات الشخصية أو الصفحات الناتجة عن عمليات الفرز والتصفية الفريدة. حافظ على وقت زحف روبوتات البحث على الأجزاء التي تريد تصنيفها.