Donde pongo robots.txt?

Guardalo en la raiz del sitio: https://www.example.com/robots.txt. Los crawlers solo piden esa ruta exacta. Un archivo en un subdirectorio se ignora.

Que diferencia hay entre Allow y Disallow?

Disallow lista prefijos de ruta que los crawlers deben saltar. Allow lista prefijos que pueden pedir, util cuando un padre esta bloqueado. Si dejas las rutas vacias, este generador usa Allow: / (todo el sitio).

robots.txt oculta paginas de Google?

No. Pide a los crawlers que no descarguen esas URLs. Las paginas bloqueadas pueden salir en busqueda si hay enlaces. Usa noindex en la pagina cuando no deban aparecer en resultados.

Debo anadir una linea Sitemap?

Si tienes un sitemap XML, si. La directiva Sitemap: es independiente de los grupos User-agent y ayuda a Google, Bing y otros a descubrir URLs. Usa una URL https absoluta.

No. Google ignora Crawl-delay. Usa los ajustes de rastreo de Search Console si necesitas frenar a Googlebot. Este generador se queda en User-agent, Allow, Disallow y Sitemap.

Sale mi archivo del dispositivo?

No. El generador de robots.txt corre por completo en tu navegador. Las rutas y la URL del sitemap no se suben ni se guardan en un servidor.

Herramientas SEO

Popular

Generador de robots.txt

Crea un archivo robots.txt en el navegador.

Preajuste

Empieza con un archivo habitual y luego edita rutas o añade la URL del sitemap.

User-agent

Usa * para todos los crawlers, o un nombre como Googlebot.

Rutas Disallow

Rutas Allow

URL del sitemap

Opcional. Se escribe como una linea Sitemap: al final del archivo.

robots.txt

User-agent: *
Allow: /

2 lineas

Guarda este archivo como robots.txt en la raiz de tu sitio (example.com/robots.txt).

Acerca de Generador de robots.txt

Crea un archivo robots.txt en el navegador. Empieza por permitir todo, bloquear todo o bloquear admin, luego edita User-agent, Allow y Disallow y opcionalmente anade la URL del sitemap. Copia el archivo y guardalo en la raiz del sitio para que los crawlers sepan que pueden pedir. Nada se sube.

Cómo usar Generador de robots.txt

Elige un preajuste: permitir todo, bloquear todo o bloquear admin.
Edita el User-agent si necesitas un crawler concreto en lugar de *.
Anade o cambia las rutas Disallow y Allow (una por linea).
Pega opcionalmente la URL de tu sitemap.
Copia el robots.txt y guardalo en https://tu-dominio/robots.txt.

Ejemplos de Generador de robots.txt

Sitio publico, permitir todo

El preajuste permitir todo emite User-agent: * y Allow: /. Anade la URL del sitemap para que los crawlers encuentren el XML en el mismo archivo.

Staging, bloquear todos los crawlers

El preajuste bloquear todo emite Disallow: / para que Googlebot y otros no entren en un host de staging o privado. Combinalo con noindex si el host llega a ser publico.

Bloquear rutas de admin del CMS

El preajuste bloquear admin escribe Disallow: /admin/ y Disallow: /wp-admin/ mientras el resto del sitio sigue rastreable.

Crawler con nombre y rutas propias

Pon User-agent en Googlebot, Disallow /tmp, Allow /public/ y una URL de sitemap para obtener un grupo mixto mas una linea Sitemap:.

Leer la guía completa

Cómo usar Generador de robots.txt: guía completa (2026) - 5 min de lectura

Preguntas frecuentes sobre Generador de robots.txt

Donde pongo robots.txt?: Guardalo en la raiz del sitio: https://www.example.com/robots.txt. Los crawlers solo piden esa ruta exacta. Un archivo en un subdirectorio se ignora.
Que diferencia hay entre Allow y Disallow?: Disallow lista prefijos de ruta que los crawlers deben saltar. Allow lista prefijos que pueden pedir, util cuando un padre esta bloqueado. Si dejas las rutas vacias, este generador usa Allow: / (todo el sitio).
robots.txt oculta paginas de Google?: No. Pide a los crawlers que no descarguen esas URLs. Las paginas bloqueadas pueden salir en busqueda si hay enlaces. Usa noindex en la pagina cuando no deban aparecer en resultados.
Debo anadir una linea Sitemap?: Si tienes un sitemap XML, si. La directiva Sitemap: es independiente de los grupos User-agent y ayuda a Google, Bing y otros a descubrir URLs. Usa una URL https absoluta.
Incluye Crawl-delay?: No. Google ignora Crawl-delay. Usa los ajustes de rastreo de Search Console si necesitas frenar a Googlebot. Este generador se queda en User-agent, Allow, Disallow y Sitemap.
Sale mi archivo del dispositivo?: No. El generador de robots.txt corre por completo en tu navegador. Las rutas y la URL del sitemap no se suben ni se guardan en un servidor.

Generador de etiquetas Open Graph

Genera etiquetas Open Graph y Twitter Card a partir de un título, una descripción, una URL y una imagen. Generador OG gratis con HTML en vivo y vista previa social.

Comprobador de meta description y vista previa SERP

Comprobador gratis de longitud SERP y vista previa de meta description. Contador de caracteres en vivo y preview del snippet de Google, o genera un borrador. Se ajusta al límite de 150-160.

Generador de slugs

Convierte cualquier título o frase en un slug de URL limpio y SEO-friendly. Minúsculas, sin acentos y con separador de guiones o guiones bajos: gratis, instantáneo y privado.