ستساعدك المقالة التالية: هل قمت بتحسين رصيد الزحف الخاص بك؟
قد لا تتمكن المواقع التي تحتوي على مئات الآلاف من الصفحات، أو حتى الملايين، من فهرسة جميع صفحاتها على الإطلاق. ويرجع ذلك إلى مفهوم يُشار إليه أحيانًا باسم “حقوق الزحف”. تشير حقوق الزحف إلى حقيقة أنه نظرًا لأن الزحف إلى موقع يحتوي على ملايين الصفحات يتطلب قدرًا كبيرًا من النطاق الترددي لمحركات البحث، فمن المحتمل أن تتم فهرسة جزء فقط من تلك الصفحات.
في الوقت الحاضر، لا يقتصر تحسين محركات البحث على وضع بعض الكلمات الرئيسية على الصفحة والحصول على مجموعة من الروابط الواردة. لقد تم تطويره بشكل معقد مع توسع الويب، ويتم تخزين المزيد من المعلومات عبر الإنترنت وتصبح الخوارزميات أكثر تعقيدًا. ومن خلال هذا الفهم، من المهم جدًا إيلاء نفس القدر من الاهتمام (إن لم يكن أكثر) للواجهة الخلفية كما هو الحال مع الواجهة الأمامية – على الأقل مع المواقع الكبيرة. قام ريتشارد باكستر، من SEOgadget، بنشر منشور رائع يحيط بدور العلامات المنظمة من حيث صلتها بمستقبل تحسين محركات البحث. تمامًا كما يعتقد باكستر (وأنا أوافق عليه) أن المعايير والاتساق في العلامات الموحدة ستلعب دورًا أكبر في قدرة محرك البحث على تصنيف وعرض المحتوى ذي الصلة، أعتقد أن تحسين تكافؤ الزحف هو عامل حاسم في عملية تحسين محركات البحث.
إذن ما هو الهدف من تحسين أسهم الزحف؟ ل تمكين محركات البحث من قضاء وقت أقل في الزحف إلى المحتوى المكرر أو الصفحات الفارغة ووقت أطول في الزحف إلى المحتوى القيم وفهرسته. تحتوي مساعدة مشرفي المواقع من Google على نشرت بعض النصائح، لكنني سأفصلها هنا أيضًا.
حرق حقوق الزحف – الأسباب الشائعة
الأسباب الشائعة التي تؤدي إلى اضطرار المحركات إلى الزحف بشكل غير ضروري إلى عناوين URL ترجع بشكل أساسي إلى بنية عنوان URL والمساحات اللانهائية. وذلك لأنها تنشئ محتوى وعناوين URL مكررة لم يكن المقصود فهرستها في المقام الأول، مما يؤدي في النهاية إلى استنفاد النطاق الترددي للمحركات التي تحاول الزحف إليها جميعًا.
أمثلة:
- معرفات الجلسة
- فرز المعلمات
- صفحات تسجيل الدخول
- نماذج الاتصال
- ترقيم الصفحات
- التقاويم التي تحتوي على رابط “الشهر التالي” أو “الشهر السابق”.
- تصفية نتائج البحث
- الروابط النسبية المكسورة
الحلول المقترحة
من خلال معالجة المصادر الشائعة التي غالبًا ما يتم إهدار حقوق الزحف فيها، ستزيد من احتمالية فهرسة المحتوى القيم المخصص للفهرسة.
- قم بإزالة التفاصيل الخاصة بالمستخدم من عناوين URL بواسطة وضع هذه المعلومات في ملف تعريف الارتباط وإعادة التوجيه 301 إلى عنوان URL المصدر.
- تخلص من فئات الروابط التي تم إنشاؤها ديناميكيًا من خلال ملف robots.txt. استخدم التعبيرات العادية المتقدمة للتعامل مع سلاسل URL المعقدة.
- روابط التقويم Nofollow
- تقليل المحتوى المكرر؛ استخدم العلامة rel=canonical
- تحسين مشكلات زمن الوصول عن طريق تقليل وقت تحميل الصفحة
التشخيص
الآن هذه معلومات رائعة يجب على الجميع معرفتها ومعالجتها. لكن كيف تعرف أن هناك مشكلة في المقام الأول؟ بالنسبة للمبتدئين، قد تقدم لك أدوات مشرفي المواقع تقريرًا تحذيريًا على النحو التالي:
علاوة على ذلك، فإن أمر البحث inurl المقترن بأمر البحث في الموقع سيفي بالغرض أيضًا للمساعدة في تقييم مدى خطورة الموقف. بمعنى آخر، كم عدد الصفحات التي تساهم في انتفاخ المحرك نتيجة للمرشحات؟
وأخيرًا، كيف يمكنك تتبع نجاح جهودك وتوجيهها؟ خذ بعين الاعتبار تتبع النسبة المئوية للصفحات المفهرسة من إجمالي الصفحات (المراد فهرستها) على الموقع بمرور الوقت. يمكنك أيضًا تتبع ذلك على مستوى أكثر تفصيلاً عن طريق حساب النسبة المئوية للصفحات التي بها مشكلات والاتجاهات بمرور الوقت عند معالجة المشكلات.
