Walidator robots.txt
Prywatne z założenia — działa w całości w Państwa przeglądarce
Wklej swój robots.txt, a narzędzie wskaże błędy składni, osierocone dyrektywy, nieznane reguły i pola spoza standardu wraz z numerami linii.
Jakie reguły są sprawdzane
Grupowanie User-agent, położenie Disallow/Allow, poprawność URL Sitemap, Crawl-delay (ostrzeżenie o niestandardowości) i nieznane dyrektywy. Każdy problem dostaje numer linii do szybkiej poprawki.
Czy powie mi, czy konkretny URL jest blokowany
Jeszcze nie — bieżąca kontrola jest tylko strukturalna. Połącz ją z testerem robots.txt w Google Search Console, jeśli musisz sprawdzić poszczególne ścieżki.
Dlaczego Crawl-delay pojawia się jako ostrzeżenie
Googlebot ignoruje Crawl-delay; Bing i Yandex go honorują. Ostrzeżenie przypomina, że nie polegasz na nim dla Google, ale możesz go zostawić dla innych.
Najczęściej zadawane pytania
- Jakie reguły są sprawdzane?
- Grupowanie User-agent, położenie Disallow/Allow, poprawność URL Sitemap, Crawl-delay (ostrzeżenie o niestandardowości) i nieznane dyrektywy. Każdy problem dostaje numer linii do szybkiej poprawki.
- Czy powie mi, czy konkretny URL jest blokowany?
- Jeszcze nie — bieżąca kontrola jest tylko strukturalna. Połącz ją z testerem robots.txt w Google Search Console, jeśli musisz sprawdzić poszczególne ścieżki.
- Dlaczego Crawl-delay pojawia się jako ostrzeżenie?
- Googlebot ignoruje Crawl-delay; Bing i Yandex go honorują. Ostrzeżenie przypomina, że nie polegasz na nim dla Google, ale możesz go zostawić dla innych.
- Czy coś jest wysyłane?
- Nie. Treść robots.txt zostaje w tej karcie — żadnych logów ani analityki danych wejściowych.