Regole confuse
Organizza Allow e Disallow in gruppi User-agent chiari.
Strumento SEO gratuito
Generatore robots.txt Crea regole SEO di crawling
Il Generatore robots.txt aiuta proprietari di siti e team SEO a preparare regole di crawling, sitemap, copia e download prima del lancio.
AD
Problemi risolti dal Generatore robots.txt
Un errore in robots.txt può bloccare pagine importanti o rendere poco chiaro il sitemap.
Funzioni del Generatore robots.txt
Usa il Generatore robots.txt come checklist SEO prima della pubblicazione.
Gruppi User-agent
Crea regole per *, Googlebot, Bingbot o crawler personalizzati.
Allow, Disallow e Sitemap
Aggiungi percorsi, sitemap e Crawl-delay quando serve.
Copia e download
Copia il risultato o scarica robots.txt.
Come usare il Generatore robots.txt
Scegli modello, rivedi percorsi ed esporta il file.
01
02
03
Flussi del Generatore robots.txt
Prepara nuovi siti, proteggi percorsi privati e sistema le basi SEO.
Crea regole visivamente
Trasforma campi in righe User-agent, Allow, Disallow, Crawl-delay e Sitemap.
Esporta prima del lancio
Controlla sitemap e percorsi privati prima del download.
Casi d’uso del Generatore robots.txt
Per SEO, sviluppo e pubblicazione.
Proprietari di siti
Creare robots.txt semplice senza scrivere ogni direttiva.
Controllo SEO
Consentire pagine importanti e bloccare percorsi privati.
Note SEO del Generatore robots.txt
robots.txt controlla il crawling, non garantisce la rimozione dall’indice.
Root del sito
Per https://example.com/ usa https://example.com/robots.txt.
Sitemap assoluto
Includi protocollo e dominio nelle righe Sitemap.
FAQ del Generatore robots.txt
Domande su regole, Crawl-delay e Sitemap.
robots.txt rimuove pagine dalla ricerca?
No. Controlla il crawling; per l’indicizzazione usa noindex o strumenti dedicati.
Google supporta Crawl-delay?
No. Google ignora Crawl-delay.
Inizia con il Generatore robots.txt
Apri lo strumento, scegli un modello ed esporta robots.txt.