الشرح
تعثر برامج الزحف على الصفحات عبر الروابط وعناوين URL المعروفة سابقًا وخرائط المواقع وإشارات أخرى. تساعد الروابط الداخلية المستخدمين وبرامج الزحف على الوصول إلى المحتوى. تسرد خريطة الموقع عناوين URL المفضلة بغرض الاكتشاف، لكنها لا تطلب من النظام فهرستها. وبالنسبة إلى عناوين URL المتشابهة، يُعد canonical إشارة إلى النسخة المفضلة، وقد يأخذ نظام البحث إشارات أخرى في الحسبان أيضًا.
مثال افتراضي
في نموذج بيئة الاختبار التدريبية، يرتبط رابط من صفحة الفهرس بـ /robots. فحص الفريق خريطة الموقع في بيئة الاختبار وأكد غياب /robots عنها؛ لكن لم يتم التحقق مما إذا كان برنامج زحف بحث قد اكتشف URL. أضاف الفريق على بيئة الاختبار URL canonical إلى خريطة الموقع وقارن النتيجة بالحالة الأصلية. يعزز هذا قابلية الاكتشاف واتساق الإشارات، لكنه لا يثبت أن برنامج زحف عثر على URL ولا يضمن فهرسته. ولا تتغير خريطة الموقع إلا في بيئة الاختبار لهذا التمرين.
التطبيق العملي
في بيئة الاختبار أو النموذج المحلي الخاص بك، تحقّق من /robots: هل يوجد رابط من صفحة متاحة؛ وهل يقود إلى URL المتوقع؛ وهل يتوافق canonical مع خريطة الموقع؛ وهل الحالة وعمليات إعادة التوجيه صحيحة؛ وهل يوجد تعارض بين canonical في HTML وخريطة الموقع؟ إذا لزم تصحيح، فاختبره في بيئة الاختبار فقط واحفظ مقارنة قبل/بعد.
قائمة التحقق
- يمكن الوصول إلى الصفحات المهمة عبر روابط HTML عادية من الموقع.
- نصوص الروابط واضحة وتشير إلى عناوين URL تعمل.
- تتضمن خريطة الموقع عناوين URL canonical الحالية، لا أخطاء أو عمليات إعادة توجيه.
- لا يشير canonical إلى صفحة غير ذات صلة أو إلى لغة أخرى.
- تم فحص معاملات الفرز والتصفية والصفحات المكررة على نحو منفصل.
خطأ شائع
اعتبار إرسال خريطة الموقع أو طلب إعادة الزحف ضمانًا للفهرسة. تعرض هذه الطرق URL أو تطلب فحصه، لكنها لا تضمن نتيجة.