Taikykite instrukciją tipinei imčiai, išsaugokite įrodymus ir užrašykite kitą veiksmą.
Patikrinkite prieigą neužblokuodami naudingų puslapių
- Gaukite kiekvieno serverio ir protokolo robots.txt. Užrašykite user-agent grupes, allow/disallow taisykles, sitemap nuorodas ir pakeitimų istoriją.
- Sudarykite svarbių kanoninių URL sąrašą ir patikrinkite nuskaitymo leidimą. Nenaudokite robots.txt URL pašalinimui iš indekso.
- Atskirai tikrinkite prisijungimą, bandomąją aplinką, paiešką ir filtrus. robots.txt naudokite tik dublikatų ar mažos vertės URL nuskaitymui valdyti; privačius puslapius apsaugokite autentifikavimu.
- Įdiekite nedidelį pakeitimą, dar kartą gaukite robots.txt, patikrinkite URL „Search Console“ ir išsaugokite grąžinimo kopiją.