Ferramenta gratuita de controle de rastreadores

Gerador de robots.txt

Crie um arquivo robots.txt, valide erros comuns enquanto edita e depois copie ou baixe o resultado. O gerador funciona no navegador e não exige conta.

Escolha o modo de edição

O modo simples é mais seguro para uma configuração rápida. O editor avançado mostra todos os grupos e regras de rastreadores.

Política por finalidade do rastreador

Comece neutro e aplique restrições a rastreadores de IA apenas quando elas fizerem sentido para sua política.

Padrão neutro: mantenha rastreadores de pesquisa, pesquisa com IA e controles de IA abertos, a menos que suas regras de caminho os bloqueiem explicitamente.

Caminhos a bloquear

Comece com um caminho sugerido ou adicione o seu. Bloqueie apenas caminhos que você realmente quer que rastreadores compatíveis evitem.

Caminhos sugeridos

Adicionar caminho personalizado

Adicione qualquer caminho do site. Caminhos sem barra inicial recebem uma automaticamente; URLs HTTP(S) completas são reduzidas ao caminho e à consulta.

Pesquisa

Permitido por padrão

Pesquisa com IA

Permitido por padrão

Controle / treinamento de IA

Permitido por padrão

Antes de publicar

  1. 1. Gerar
    Revise o resultado ao vivo.
  2. 2. Validar
    Verifique sintaxe e compatibilidade.
  3. 3. Testar URLs
    Verifique caminhos e rastreadores importantes.
  4. 4. Publicar
    Envie como /robots.txt na raiz do site.

robots.txt gerado

Resultado ao vivo; geração e validação permanecem no navegador.

User-agent: *
0 erro0 aviso0 nota

Nenhum aviso de sintaxe ou compatibilidade detectado.

Gere com segurança

Crie diretivas User-agent, Allow, Disallow e Sitemap sem formatar cada linha manualmente.

Identifique regras arriscadas

Receba alertas sobre bloqueio do site inteiro, URLs de sitemap inválidas, diretivas não padronizadas e erros comuns sobre indexação.

Teste antes de publicar

Passe da geração para validação, verificação ao vivo e testes de URLs sem sair do site.

Como criar um arquivo robots.txt

  1. 1

    Escolha um modelo inicial

    Comece com um modelo padrão, WordPress, Blogger ou de homologação e depois revise cada regra para o seu site.

  2. 2

    Adicione regras de rastreamento

    Informe um caminho Allow ou Disallow por linha e defina o grupo User-agent principal ao qual as regras se aplicam.

  3. 3

    Adicione exceções por rastreador

    Os controles avançados permitem criar grupos separados para rastreadores que devem se comportar de forma diferente das regras principais.

  4. 4

    Adicione seu sitemap

    Use uma URL absoluta HTTP(S) para o sitemap, como https://example.com/sitemap.xml.

  5. 5

    Revise os avisos de validação

    Um arquivo que parece válido ainda pode conter uma regra perigosa. Corrija erros e revise os avisos antes de publicar.

  6. 6

    Publique na raiz do site

    O local padrão é /robots.txt, por exemplo https://example.com/robots.txt.

robots.txt não torna uma página privada

robots.txt controla o acesso de rastreadores. Não é um sistema de autenticação, e bloquear o rastreamento de uma URL não garante que ela não possa aparecer nos resultados de pesquisa.

Controlar o rastreamentorobots.txt
Solicitar não indexaçãonoindex
Proteger conteúdo privadoautenticação / autorização
Entenda como robots.txt funciona →

Rastreadores de pesquisa e controles de rastreadores de IA não são a mesma coisa

A seção avançada mantém tokens de rastreadores separados. Um provedor pode documentar um rastreador para descoberta em pesquisa e outro token para desenvolvimento de modelos ou controles de produtos de IA. Use uma regra específica apenas quando quiser que aquele rastreador tenha comportamento diferente do grupo User-agent principal.

Rastreamento de pesquisa

Rastreadores tradicionais como Googlebot e Bingbot descobrem e rastreiam conteúdo para produtos de pesquisa.

Descoberta por pesquisa com IA

Exemplos incluem OAI-SearchBot, Claude-SearchBot e PerplexityBot. Consulte a documentação do provedor antes de alterar o acesso.

Controles de produtos de IA

Tokens como GPTBot, ClaudeBot e Google-Extended têm finalidades específicas de cada provedor e não devem ser tratados como equivalentes.

Modelos de robots.txt para plataformas comuns

Os modelos são pontos de partida editáveis, não boas práticas universais. Revise os caminhos realmente usados pelo seu site antes de publicar.

robots.txt para WordPress

Gere um ponto de partida para WordPress e revise wp-admin, admin-ajax, sitemap e regras de rastreamento.

Abrir ferramenta →

Gerador de robots.txt para Blogger

Crie um arquivo voltado ao Blogger e revise pesquisa, marcadores e sitemap antes de ativar regras personalizadas.

Abrir ferramenta →

Ferramentas relacionadas de robots.txt

Use uma página específica quando a tarefa mudar de criar o arquivo para validar, verificar ou testar suas regras.

Validador

Cole as regras e encontre erros de sintaxe ou avisos de compatibilidade.

Abrir ferramenta →

Verificador

Busque o robots.txt publicado de um site e analise HTTP e comportamento das regras.

Abrir ferramenta →

Testador

Teste se uma URL está permitida ou bloqueada para um rastreador.

Abrir ferramenta →

Base de conhecimento

Guias de robots.txt

Guias práticos sobre rastreamento, indexação, escopo por host, sitemaps, parâmetros de URL, cache e solução de problemas com robots.txt.

Exemplos

Veja exemplos práticos para permitir rastreadores, bloquear caminhos, adicionar sitemaps, usar curingas e regras específicas.

→

Guias de robots.txt

Guias sobre rastreadores de IA, noindex, sitemaps, subdomínios, parâmetros de URL, cache, codificação e regras de robots.txt.

→

Guias de robots.txt por plataforma

Configuração e verificação de robots.txt no Shopify, Next.js, Wix, Squarespace, Webflow e Magento / Adobe Commerce.

→

Guias relacionados

Referências técnicas

As regras e orientações específicas de rastreadores são conferidas com padrões primários e documentação dos provedores, em vez de copiadas de outras ferramentas de SEO.

Última verificação em 2026-09-10

Perguntas frequentes

Onde o robots.txt deve ficar?

Na raiz do host que ele controla, normalmente em /robots.txt.

robots.txt pode remover uma URL do Google?

Sua função principal é controlar o rastreamento. Para impedir indexação, use um controle de indexação adequado em vez de depender apenas de Disallow.

O Google aceita Crawl-delay?

O Googlebot não aceita a diretiva Crawl-delay, por isso o validador exibe um aviso quando ela aparece.

Devo bloquear todos os rastreadores relacionados a IA?

Não automaticamente. Tokens diferentes podem servir a pesquisa, recuperação solicitada pelo usuário, desenvolvimento de modelos ou outras finalidades do provedor. Decida rastreador por rastreador e confira a documentação atual.

Este gerador é gratuito?

Sim. A geração e validação principais acontecem no navegador e não exigem conta.