Validatore robots.txt
Privacy by design — tutto gira nel tuo browser
Incolla il tuo robots.txt e lo strumento segnala errori di sintassi, direttive orfane, regole sconosciute e campi non standard con numero di riga.
Quali regole controlla lo strumento
Raggruppamento User-agent, posizionamento di Disallow/Allow, validità dell’URL Sitemap, Crawl-delay (segnalato come non standard) e direttive sconosciute. Ogni problema mostra il numero di riga per una correzione rapida.
Mi dice se una URL specifica è bloccata
Non ancora — il controllo attuale è solo strutturale. Affiancalo al tester robots.txt di Google Search Console per la valutazione path per path.
Perché Crawl-delay esce come avviso
Googlebot ignora Crawl-delay; Bing e Yandex lo rispettano. L’avviso ti ricorda che su Google non puoi contarci, ma puoi tenerlo per gli altri.
Domande frequenti
- Quali regole controlla lo strumento?
- Raggruppamento User-agent, posizionamento di Disallow/Allow, validità dell’URL Sitemap, Crawl-delay (segnalato come non standard) e direttive sconosciute. Ogni problema mostra il numero di riga per una correzione rapida.
- Mi dice se una URL specifica è bloccata?
- Non ancora — il controllo attuale è solo strutturale. Affiancalo al tester robots.txt di Google Search Console per la valutazione path per path.
- Perché Crawl-delay esce come avviso?
- Googlebot ignora Crawl-delay; Bing e Yandex lo rispettano. L’avviso ti ricorda che su Google non puoi contarci, ma puoi tenerlo per gli altri.
- Viene caricato qualcosa?
- No. Il contenuto del robots.txt resta in questa scheda — nessun log, nessuna analytics sull’input.