Erklärung
Crawler finden Seiten über Links, bereits bekannte URLs, Sitemaps und weitere Signale. Interne Links helfen Nutzern und Crawlern, Inhalte zu erreichen. Eine Sitemap listet bevorzugte URLs zur Entdeckung auf; sie weist ein System nicht an, diese zu indexieren. Bei ähnlichen URLs ist canonical ein Signal für die bevorzugte Version; ein Suchsystem kann auch andere Signale berücksichtigen.
Fiktives Beispiel
In der Testnachbildung verlinkt eine Katalogseite auf /robots, doch die URL fehlt in der Sitemap. Die Prüfung bestätigt einen internen Pfad aus dem Katalog; ob ein Suchcrawler die URL entdeckt hat, wurde nicht geprüft. Das Team hat die Sitemap der Testumgebung separat geprüft und bestätigt, dass die URL darin fehlt. In der Testumgebung ergänzt das Team die kanonische URL in der Sitemap und vergleicht den Zustand vorher und nachher. Das verbessert Auffindbarkeit und Signalkonsistenz, beweist jedoch weder, dass ein Crawler die URL bereits gefunden hat, noch garantiert es die Indexierung. Für diese Übung wird die Sitemap nur in der Testumgebung geändert.
Übung
Prüfe /robots in deiner Testumgebung oder lokalen Nachbildung: Gibt es einen Link von einer erreichbaren Seite? Führt er zur erwarteten URL? Stimmen canonical und Sitemap überein? Sind Status und Weiterleitungen korrekt? Widerspricht das HTML-canonical der Sitemap? Teste nötige Korrekturen nur in der Testumgebung und sichere einen Vorher-nachher-Vergleich.
Prüfliste
- Wichtige Seiten sind über normale HTML-Links der Website erreichbar.
- Links haben aussagekräftige Texte und führen zu funktionierenden URLs.
- Die Sitemap enthält aktuelle kanonische URLs, keine Fehler oder Weiterleitungen.
Canonicalverweist weder auf eine unpassende Seite noch auf eine andere Sprache.- Sortier-/Filterparameter und Duplikate wurden gesondert geprüft.
Häufiger Fehler
Eine Sitemap-Einreichung oder erneute Abrufanfrage als Garantie für die Indexierung betrachten. Diese Methoden melden eine URL oder fordern eine Prüfung an; sie versprechen kein Ergebnis.