Generador de robots.txt: gratis y privado, en tu navegador
Crea un robots.txt válido para tu sitio, al instante y sin subir nada.
Esta herramienta funciona por completo en tu navegador. Tus archivos nunca se suben: se quedan en tu dispositivo.
User-agent: * Disallow:
Un archivo robots.txt indica a los motores de búsqueda y a otros rastreadores qué partes de tu sitio pueden visitar. Hacerlo bien importa: una sola regla descuidada puede ocultar todo tu sitio a Google o exponer páginas que pretendías mantener fuera del índice.
Este generador crea el archivo a medida que escribes, para que veas exactamente qué hace cada regla. Todo ocurre en tu navegador (no se envía ningún dato a ningún sitio) y puedes copiar el resultado o descargarlo como robots.txt cuando luzca bien.
Cómo usar Generador de robots.txt
- Establece el agente de usuario al que se aplican las reglas (usa * para todos los rastreadores).
- Añade las rutas que quieres No permitir (Disallow) y, opcionalmente, cualquier ruta que quieras Permitir (Allow).
- Opcionalmente, añade un retardo de rastreo y la URL de tu sitemap.
- Revisa la vista previa en vivo y luego cópiala o descárgala como robots.txt.
- Sube el archivo a la raíz de tu sitio, p. ej. example.com/robots.txt.
Preguntas frecuentes
¿Se sube o se envía algo a un servidor?
No. El texto de robots.txt se crea por completo en tu navegador a medida que escribes. Nada de lo que introduces se sube, almacena ni comparte.
¿Dónde coloco el archivo robots.txt?
Debe estar en la raíz de tu dominio, accesible en https://tudominio.com/robots.txt. Los rastreadores no lo buscan en subcarpetas.
¿Qué hace «Disallow: /»?
Un Disallow de una sola barra bloquea todo el sitio para ese agente de usuario. Deja vacías las rutas de Disallow (o usa «Allow: /») si quieres que se rastree todo.
¿robots.txt mantiene las páginas fuera de Google por completo?
No necesariamente. Pide a los rastreadores que se comportan correctamente que no obtengan una ruta, pero una URL bloqueada aún puede indexarse si está enlazada desde otro sitio. Usa una metaetiqueta noindex o un encabezado HTTP para mantener de forma fiable una página fuera de los resultados de búsqueda.
¿Debería añadir una línea de sitemap?
Es opcional, pero recomendable. Una línea Sitemap señala a los rastreadores tu sitemap XML y los ayuda a descubrir tus páginas más rápido.