Giải thích
Crawler tìm trang qua liên kết, URL đã biết trước đó, sitemap và các tín hiệu khác. Liên kết nội bộ giúp người dùng và crawler truy cập nội dung. Sitemap liệt kê URL ưu tiên để phát hiện; sitemap không ra lệnh cho hệ thống lập chỉ mục URL. Với các URL tương tự nhau, canonical là tín hiệu về phiên bản ưu tiên và hệ thống tìm kiếm cũng có thể xem xét các tín hiệu khác.
Ví dụ hư cấu
Trong bản mockup staging đào tạo, một trang danh mục liên kết đến /robots. Đội ngũ đã kiểm tra sitemap staging và xác nhận /robots không có trong đó; vẫn chưa xác minh được crawler tìm kiếm đã phát hiện URL hay chưa. Trên staging, đội ngũ thêm URL canonical vào sitemap rồi so sánh với trạng thái ban đầu. Việc này cải thiện khả năng phát hiện và tính nhất quán của tín hiệu, nhưng không chứng minh crawler đã tìm thấy URL hoặc bảo đảm lập chỉ mục. Trong bài tập này, chỉ thay đổi sitemap staging.
Thực hành
Trên staging hoặc bản mockup cục bộ của bạn, kiểm tra /robots: có liên kết từ trang truy cập được không; liên kết có dẫn đến URL dự kiến không; canonical có khớp sitemap không; mã trạng thái và chuyển hướng có chính xác không; và canonical trong HTML có mâu thuẫn với sitemap không? Nếu cần chỉnh sửa, chỉ thử trên staging và lưu so sánh trước/sau.
Danh sách kiểm tra
- Có thể truy cập các trang quan trọng qua liên kết HTML thông thường trên website.
- Liên kết có nội dung mô tả ý nghĩa và dẫn đến URL hoạt động.
- Sitemap chứa URL canonical hiện tại, không chứa lỗi hoặc URL chuyển hướng.
- Canonical không trỏ đến trang không liên quan hoặc phiên bản ngôn ngữ khác.
- Đã kiểm tra riêng tham số sắp xếp/lọc và các trang trùng lặp.
Lỗi thường gặp
Xem việc gửi sitemap hoặc yêu cầu thu thập lại dữ liệu như bảo đảm được lập chỉ mục. Những cách này thông báo một URL hoặc yêu cầu kiểm tra; chúng không hứa hẹn kết quả.