Regras confusas
Organize Allow e Disallow em grupos User-agent claros.
Ferramenta SEO gratuita
Gerador de robots.txt Criar regras SEO de rastreamento
O Gerador de robots.txt ajuda donos de sites e equipes SEO a preparar regras de rastreamento, sitemap, cópia e download antes do lançamento.
AD
Problemas que o Gerador de robots.txt resolve
Um erro em robots.txt pode bloquear páginas importantes ou deixar o sitemap confuso.
Recursos do Gerador de robots.txt
Use o Gerador de robots.txt como checklist SEO antes de publicar.
Grupos User-agent
Crie regras para *, Googlebot, Bingbot ou rastreadores personalizados.
Allow, Disallow e Sitemap
Adicione caminhos, sitemaps e Crawl-delay quando fizer sentido.
Copiar e baixar
Copie o resultado ou baixe robots.txt.
Como usar o Gerador de robots.txt
Escolha modelo, revise caminhos e exporte o arquivo.
01
02
03
Fluxos do Gerador de robots.txt
Prepare sites novos, proteja caminhos privados e organize o básico de SEO.
Criar regras visualmente
Transforme campos em linhas User-agent, Allow, Disallow, Crawl-delay e Sitemap.
Casos de uso do Gerador de robots.txt
Para SEO, desenvolvimento e publicação.
Donos de sites
Criar robots.txt simples sem escrever cada diretiva.
Revisão SEO
Permitir páginas importantes e bloquear caminhos privados.
Notas SEO do Gerador de robots.txt
robots.txt controla rastreamento, não garante remoção do índice.
Local raiz
Para https://example.com/ use https://example.com/robots.txt.
Sitemap absoluto
Inclua protocolo e domínio nas linhas Sitemap.
FAQ do Gerador de robots.txt
Perguntas sobre regras, Crawl-delay e Sitemap.
robots.txt remove páginas da busca?
Não. Ele controla rastreamento; para indexação use noindex ou ferramentas apropriadas.
Google aceita Crawl-delay?
Não. O Google ignora Crawl-delay.
Comece com o Gerador de robots.txt
Abra a ferramenta, escolha um modelo e exporte robots.txt.