ستساعدك المقالة التالية: إعفاء Googlebot من العمل غير الضروري
لقد بحثت بالفعل في طرق لزيادة معدل الزحف لأولئك الذين يشتبهون في أن موقعهم يستحق المزيد من زيارات الروبوت المتكررة. ومع ذلك، من وقت لآخر، أصادف مواضيع في المنتدى يشتكي فيها مشرفو المواقع من ظهور روبوت (Google). نشطة للغاية في صفحاتهم تناول الطعام أكثر من اللازم com.bandwitch.
لذا أدرج هنا روابط لتلك الشكاوى والحلول الممكنة التي قد تساعد في التعامل مع الموقف:
- التحقق من جوجل بوت – تأكد من أن شركة Google مهتمة جدًا بموقعك.
- قم بتغيير Googlebot معدل الزحف عبر أدوات مشرفي المواقع من Google (في حين أن خيار “المعدل الأعلى” متاح فقط لعدد قليل من الأشخاص المحظوظين، “معدل أبطأ“يمكن تعيينه من قبل أي شخص)؛
- تأكد لا يقوم Googlebot بالزحف إلى أي شيء عناوين URL الإضافية – على سبيل المثال، عناوين URL المكررة، أو عناوين URL التي تحتوي على معرفات الجلسة أو معلمات أخرى (متعددة) غير ضرورية للفهرسة:
- التصفية الإضافية لمجموعة من العناصر؛
- فرز المعلمات. إلخ.
- تأكد لا تحتوي صفحاتك على عدد كبير جدًا من عناوين URL الفريدة التي تجعل الروبوت مشغولًا للغاية: المعيار الأكثر شيوعًا والمعروف على نطاق واسع لا يزيد عن 100 رابط لكل صفحة (على الرغم من أن هذا ليس أمرًا ضروريًا بالطبع، يمكن لـ Google التعامل مع المزيد – فقط احتفظ العدد معقول)؛
- تأكد من أن Googlebot ليس مشغولاً بالزحف إلى الصور الضخمة أو ملفات PDF – أي انتبه إلى حجم ملفاتك ووقت التحميل الإجمالي لصفحتك.
