Onde coloco o robots.txt?

Salve o arquivo na raiz do site: https://www.example.com/robots.txt. Os crawlers so pedem esse caminho exato. Um arquivo em subpasta e ignorado.

Qual a diferenca entre Allow e Disallow?

Disallow lista prefixos de caminho que os crawlers devem pular. Allow lista prefixos que podem pedir, util quando um pai esta bloqueado. Se os caminhos ficarem vazios, este gerador usa Allow: / (o site inteiro).

robots.txt esconde paginas do Google?

Nao. Pede aos crawlers que nao baixem essas URLs. Paginas bloqueadas ainda podem aparecer na busca se houver links. Use noindex na pagina quando ela nao deve sair nos resultados.

Devo adicionar uma linha Sitemap?

Sim, se voce tem um sitemap XML. A diretiva Sitemap: e independente dos grupos User-agent e ajuda o Google, o Bing e outros a descobrir URLs. Use uma URL https absoluta.

Nao. O Google ignora Crawl-delay. Use as configuracoes de rastreamento do Search Console se precisar desacelerar o Googlebot. Este gerador fica em User-agent, Allow, Disallow e Sitemap.

O arquivo sai do dispositivo?

Nao. O gerador de robots.txt roda inteiramente no navegador. Caminhos e a URL do sitemap nao sao enviados nem armazenados em um servidor.

Ferramentas de SEO

Popular

Gerador de robots.txt

Monte um arquivo robots.txt no navegador.

Predefinicao

Comece com um arquivo comum e depois edite caminhos ou adicione a URL do sitemap.

User-agent

Use * para todos os crawlers, ou um nome como Googlebot.

Caminhos Disallow

Caminhos Allow

URL do sitemap

Opcional. Gravado como uma linha Sitemap: no fim do arquivo.

robots.txt

User-agent: *
Allow: /

2 linhas

Salve este arquivo como robots.txt na raiz do site (example.com/robots.txt).

Sobre o Gerador de robots.txt

Monte um arquivo robots.txt no navegador. Comece por permitir tudo, bloquear tudo ou bloquear admin, depois edite User-agent, Allow e Disallow e opcionalmente adicione a URL do sitemap. Copie o arquivo e salve na raiz do site para os crawlers saberem o que podem pedir. Nada e enviado.

Como usar o Gerador de robots.txt

Escolha uma predefinicao: permitir tudo, bloquear tudo ou bloquear admin.
Edite o User-agent se precisar de um crawler nomeado em vez de *.
Adicione ou altere os caminhos Disallow e Allow (um por linha).
Opcionalmente cole a URL do sitemap.
Copie o robots.txt e salve em https://seu-dominio/robots.txt.

Exemplos de Gerador de robots.txt

Site publico, permitir tudo

A predefinicao permitir tudo emite User-agent: * e Allow: /. Adicione a URL do sitemap para os crawlers acharem o XML no mesmo arquivo.

Staging, bloquear todos os crawlers

A predefinicao bloquear tudo emite Disallow: / para o Googlebot e outros ficarem fora de um host de staging ou privado. Combine com noindex se o host ficar publico.

Bloquear caminhos de admin do CMS

A predefinicao bloquear admin escreve Disallow: /admin/ e Disallow: /wp-admin/ enquanto o resto do site continua rastreavel.

Crawler nomeado e caminhos proprios

Defina User-agent como Googlebot, Disallow /tmp, Allow /public/ e uma URL de sitemap para um grupo misto mais uma linha Sitemap:.

Ler o guia completo

Como usar o Gerador de robots.txt: guia completo (2026) - 5 min de leitura

Perguntas frequentes sobre o Gerador de robots.txt

Onde coloco o robots.txt?: Salve o arquivo na raiz do site: https://www.example.com/robots.txt. Os crawlers so pedem esse caminho exato. Um arquivo em subpasta e ignorado.
Qual a diferenca entre Allow e Disallow?: Disallow lista prefixos de caminho que os crawlers devem pular. Allow lista prefixos que podem pedir, util quando um pai esta bloqueado. Se os caminhos ficarem vazios, este gerador usa Allow: / (o site inteiro).
robots.txt esconde paginas do Google?: Nao. Pede aos crawlers que nao baixem essas URLs. Paginas bloqueadas ainda podem aparecer na busca se houver links. Use noindex na pagina quando ela nao deve sair nos resultados.
Devo adicionar uma linha Sitemap?: Sim, se voce tem um sitemap XML. A diretiva Sitemap: e independente dos grupos User-agent e ajuda o Google, o Bing e outros a descobrir URLs. Use uma URL https absoluta.
Inclui Crawl-delay?: Nao. O Google ignora Crawl-delay. Use as configuracoes de rastreamento do Search Console se precisar desacelerar o Googlebot. Este gerador fica em User-agent, Allow, Disallow e Sitemap.
O arquivo sai do dispositivo?: Nao. O gerador de robots.txt roda inteiramente no navegador. Caminhos e a URL do sitemap nao sao enviados nem armazenados em um servidor.

Gerador de tags Open Graph

Gere tags Open Graph e Twitter Card a partir de um título, descrição, URL e imagem. Gerador OG grátis com HTML ao vivo e prévia social.

Verificador de meta description e prévia da SERP

Verificador grátis de tamanho de SERP e prévia de meta description. Contador de caracteres e preview do Google - ou gere um rascunho no limite de 150-160.

Gerador de slug

Transforme títulos e frases em slugs de URL limpos e otimizados para SEO. Minúsculas, sem acentos, hífen ou underline - grátis, instantâneo e privado.