جوجل تفحص حالة HTTP قبل فهرسة المحتوى
إذا أرسلت صفحة ويب حالة أخرى غير الرمز 200 ، فستكون هناك احتمالات كبيرة منها عدم اهتمام جوجل بمحتوى الصفحة. تحدد حالة HTTP التي يرسلها خادم الويب ما إذا كانت جوجل تنظر إلى محتويات الصفحة أم لا. تتحقق جوجل من هذه الحالة أولاً قبل تقديم المحتوى وفهرسته. في مشرفي المواقع Hangout قال يوهانس مولر ، إذا أرسلت الصفحة خطأ 400 أو 500 ، أو في حالة حدوث إعادة توجيه ، فلن يتم فهرسة المحتوى.
هذا يعني أن جوجل تهمل محتوى في صفحات 404 ولا تفهرسه ، حتى لو كانت الصفحات مصممة بشكل جيد وغنية بالمعلومات. إذا كان هذا ينطبق أيضًا على رموز حالة HTTP الأخرى ، فقال مولر لا. هناك عدد قليل من رموز الحالة التي يمكن أن تحدث من وقت لآخر ، مثل الحالة 201 “تم الإنشاء” أو الحالة 206 “المحتوى الجزئي”.
بالطبع ، من الصواب والمعقول إرسال الحالة 404 في حالة عدم العثور على الصفحات – على سبيل المثال ، إذا تم حذف الصفحة. في هذه الحالة ، تتلقى Google إشارة واضحة مفادها أنه يجب إزالة الصفحة من الفهرس أو عدم فهرستها على الإطلاق.
شيء آخر و هو الخطأ 500 الذي يشير إلى مشاكل الخادم. إذا كان أحد المواقع يصدر العديد من هذه الأخطاء ، فيجب التحقق من وجود مشكلات فنية ، حيث إن الأخطاء المتكررة قد تتسبب في قيام جوجل بالزحف إلى الموقع بشكل أقل ، أو التوقف عن الزحف إليه .
