ستساعدك المقالة التالية: كيف يمكن أن يؤثر 500 رمز خطأ على فهرسة Google
أجاب جون مولر من Google على سؤال حول متى سيؤدي وجود 500 رمز استجابة للخطأ إلى قيام Googlebot بالزحف إلى المحتوى بشكل أقل. وأوضح مولر السيناريوهات التي لن يؤثر فيها 500 رمز استجابة على الزحف ومتى قد تتسبب في إسقاط الصفحات من فهرس Google.
تم حظر Googlebot عن طريق الخطأ وتسبب في حدوث 500 خطأ
أوضح الشخص الذي يطرح السؤال أن نظام توصيل المحتوى الخاص به تم إعداده لحظر الروبوتات السيئة مع السماح للمستخدمين الفعليين والروبوتات الشرعية بتصفح الموقع.
كان كل شيء يسير على ما يرام حتى قاموا بتحديث “مجموعة مراقبة الخادم” الخاصة بهم ويبدو أن مرشحات وإعدادات حظر الروبوتات السابقة لم يتم نقلها إلى النظام الجديد.
بعد ذلك لاحظوا أن Google Search Console بدأت في إدراج 500 رمز استجابة للخطأ استجابةً لزحف Googlebot.
انتهى الشخص من شرح ما حدث ثم سأل السؤال:
“لقد طرح فريق التكنولوجيا لدينا سؤالًا حول ما إذا كان هذا يمثل تأثيرًا حقيقيًا على المستخدم ولماذا ننظر على وجه التحديد إلى Googlebot وليس مقاييس المستخدم الحقيقية لإثبات وجود مشكلة هنا.
لذا، وفي ظل هذا السياق، لدي بعض الأسئلة.
الأول هو مجرد إبعاد القلق التكنولوجي عن الطريق.
من وجهة نظرك، كيف يمكن لـ Googlebot عرض أخطاء السلسلة 500 وهل يمكنك تقديم أي توضيح بشأن …العتبات المحددة وعند هذه النقطة سوف يقوم Googlebot … بالزحف إلى محتوى المصدر … بشكل أقل، بناءً على تلك الأخطاء؟”
ما هو رمز الخطأ 500؟
تقوم الخوادم بتوصيل مجموعة متنوعة من رموز استجابة الحالة إلى المتصفحات والروبوتات. تشير رموز الاستجابة هذه، على سبيل المثال، إلى ما إذا كان طلب الصفحة ناجحًا، أو تمت إعادة توجيهه إلى صفحة أخرى، أو تم حظره أو لم ينجح.
- يشير رمز الاستجابة 200 إلى نجاح طلب صفحة الويب.
- رمز الاستجابة 500 يعني أن طلب صفحة الويب لم ينجح.
الاسم الرسمي لرمز الاستجابة 500 هو:
“500 خطأ داخلي في الخادم”
هناك إصدارات أخرى من رمز الاستجابة 500 توضح سببًا محددًا لعدم نجاح طلب صفحة الويب.
يعد رمز الاستجابة 500 عامًا إلى حد ما لأنه يعني ببساطة أن طلب الصفحة لم ينجح. ولكن هذا يعني غالبًا أن الخادم كان معطلاً ولكن ليس دائمًا.
Google Search Console و500 استجابة للخطأ
إنها لفكرة جيدة مراقبة Search Console بحثًا عن 500 استجابة خطأ لأنها مؤشر قوي على وجود خطأ ما.
في بعض الأحيان قد يعني ذلك أن الخادم يتعرض لحمل ثقيل، على سبيل المثال من عدد كبير جدًا من الروبوتات وبسبب ذلك فهو غير قادر على خدمة صفحات الويب.
في هذه الحالة، يبدو أن المشكلة كانت بسبب خطأ في التكوين في شبكة توصيل المحتوى (CDN) التي منعت Google عن غير قصد من الوصول إلى صفحات الويب.
كيف تتأثر فهرسة Googlebot بـ 500 خطأ
قدم مولر شرحًا مفيدًا للخطوات التي تتخذها Google ردًا على 500 رمز خطأ وكيف يمكن أن تؤدي الأخطاء المستمرة في النهاية إلى إسقاط صفحات الويب هذه من فهرس بحث Google.
أجاب جون مولر من جوجل:
“ليس لدينا أي عتبات قوية في هذا الشأن.
ولكن ما يحدث بشكل أساسي مع 500 خطأ هو أننا سنحاول إعادة المحاولة.
وإذا واصلنا رؤية … الأخطاء الـ 500، فسنبطئ عملية الزحف.
وإذا واصلنا رؤية وجود 500 خطأ، فسنقوم بإسقاط عناوين URL هذه من الفهرس.
لذلك، إذا كانت الصفحات الفردية تحتوي بين الحين والآخر على خطأ 500، فهذا ليس بالأمر الكبير.
سنعيد تجربتها، وستظل مفهرسة وفي المرة التالية التي نعيد فيها المحاولة، فلا بأس.”
بعد ذلك، يوضح مولر أن السبب وراء إبطاء Googlebot لعملية الزحف هو أن Googlebot نفسه يتسبب في التحميل الزائد على الخادم.
“ولكن إذا كان جزء كبير من الموقع يحتوي باستمرار على 500 خطأ، فقد نفترض أننا ربما نتسبب في المشكلة وسنقوم بإبطاء الزحف إلى الموقع بأكمله وفي مرحلة ما سنقول حسنًا، يبدو أن هذه لقد اختفت الصفحات حقًا، وسنقوم بإسقاطها.
إذن هذه هي التأثيرات التي ستراها هناك بشكل أساسي، وإذا كنت تتحدث عن موقع كبير وتتساءل عن نسبة الأخطاء الـ 500 التي تعتبر مقبولة… لا أعرف.
شعوري هو أنك إذا رأيت شيئًا يزيد عن واحد بالمائة، فهذا يبدو وكأنه شيء ما معطل نوعًا ما وربما سيكون شيئًا نبدأ فيه في التباطؤ.
لكنني لا أعتقد أن لدينا أي عتبات صعبة يمكن أن نقول فيها، إن هذا العدد الكبير من الطلبات وهذا العدد الكبير من الأخطاء يعني هذا التباطؤ الكبير.
مراقبة Search Console بحثًا عن 500 خطأ
الأمر متروك لكل ناشر ليقرر ما هو روتينه اليومي. بالنسبة لبعض الأشخاص، يكفي التحقق من وحدة التحكم في البحث مرة واحدة في الأسبوع. قد يجد البعض أنه من المطمئن التحقق من Search Console مرة واحدة يوميًا للاستجابة للظروف غير المتوقعة.
على أية حال، 500 رمز خطأ هو شيء يجب مراقبة Search Console بسببه. كما ذكر جون مولر، يمكن أن تكون الأخطاء 500 واسعة النطاق إشارة إلى وجود خطأ ما وبحاجة إلى اهتمام فوري.
اقتباسات
قائمة اتحاد شبكة الويب العالمية (W3C) برموز استجابة الخادم
كيف تستجيب جوجل لـ 500 رمز استجابة؟
شاهد المناقشة عند الدقيقة 13:48
