Auditoria do site ao vivo
Verificador de robots.txt
Informe a URL de um site para buscar o robots.txt da raiz e analisar resposta HTTP, tamanho do arquivo e avisos de validação.
Busca /robots.txt na raiz do site, segue com segurança até cinco redirecionamentos, bloqueia destinos privados/locais e para de ler acima de 500 KiB.
Informe um site público para verificar se robots.txt existe, se rastreadores de pesquisa acessam a raiz e o que precisa de atenção.
Verificador x validador
O verificador busca o arquivo /robots.txt publicado pelo site. O validador não faz solicitação de rede: ele analisa diretamente o texto colado.
Precisa testar uma URL específica?
Use o testador para saber se uma URL específica está permitida ou bloqueada para determinado rastreador.
Abrir o Testador de robots.txt →Resultado rápido
Comece aqui. Expanda Detalhes técnicos apenas quando precisar de informações de HTTP, redirecionamentos, grupos de rastreadores ou validação.
Acesso da pesquisa à raiz
O acesso à raiz verifica apenas /. Use o Testador para verificar URLs e caminhos importantes individualmente ou em lote.
O que devo corrigir?
Priorizado com base no acesso dos rastreadores e diagnósticos de validação.
Referências técnicas
As regras e orientações específicas de rastreadores são conferidas com padrões primários e documentação dos provedores, em vez de copiadas de outras ferramentas de SEO.
- RFC 9309
Sintaxe, correspondência, agrupamento e comportamento de codificação percentual do Robots Exclusion Protocol.
- Especificação de robots.txt do Google
Comportamento específico do Google para robots.txt e campos aceitos.