Gerador de robots.txt
Crie um arquivo robots.txt com user-agents, caminhos permitidos ou bloqueados e sitemap. Revise as regras antes de copiar ou baixar o arquivo.
Preencha um grupo User-agent com caminhos Allow/Disallow, um por linha, e Sitemap opcional. Baixe e confira antes de substituir o arquivo existente.
Resultado
O resultado aparecerá aqui.
Contamos quais ferramentas são mais usadas, sem incluir os valores informados nem o conteúdo dos arquivos nas estatísticas. Privacidade
Como usar
Preencha um grupo User-agent com caminhos Allow/Disallow, um por linha, e Sitemap opcional. Baixe e confira antes de substituir o arquivo existente.
Método e limites
robots.txt controla o rastreamento: não protege dados nem garante desindexação. Instale na raiz do domínio e confira as regras.