Técnicas
Generador de robots.txt
Genera un robots.txt válido con reglas allow/disallow, sitemap y crawl-delay. Copia y pega en segundos.
Dile a los buscadores qué rastrear. Crea un robots.txt limpio con valores por defecto y tu sitemap.
Gratis · en tu navegador
Paths to block (one per line):
Resultado
Run this tool
Free daily runs · Pro is unlimited.
Cómo usar Generador de robots.txt
- Elige permitir todo o bloquear rutas
- Añade la URL de tu sitemap
- Copia el robots.txt a la raíz de tu sitio
Preguntas frecuentes
¿Dónde va robots.txt?
En la raíz del dominio, p. ej. https://example.com/robots.txt
¿Evita la indexación?
Controla el rastreo, no la indexación. Usa noindex para excluir una página.