Generador de robots.txt
Crea un archivo robots.txt con user-agents, rutas permitidas o bloqueadas y sitemap. Revisa las reglas antes de copiarlo o descargarlo.
Completa un grupo User-agent con rutas Allow/Disallow, una por línea, y Sitemap opcional. Descarga y revisa antes de sustituir un archivo existente.
Resultado
El resultado aparecerá aquí.
Contamos qué herramientas se utilizan más, sin incluir los valores introducidos ni el contenido de los archivos en las estadísticas. Privacidad
Cómo usarlo
Completa un grupo User-agent con rutas Allow/Disallow, una por línea, y Sitemap opcional. Descarga y revisa antes de sustituir un archivo existente.
Método y límites
robots.txt controla el rastreo: no protege datos ni garantiza desindexación. Instálalo en la raíz y revisa las reglas.