Guias de robots.txt

Sitemap no robots.txt: como adicionamos e verificamos

Nosso processo para adicionar Sitemap:, escolher índice ou vários arquivos e confirmar que a produção aponta para URLs canônicas.

Por Robots.txt Tools Editorial TeamÚltima verificação em 2026-09-131 min de leitura

Método editorial: este guia documenta o processo de revisão da equipe editorial do Robots.txt Tools. A linguagem procedural em primeira pessoa descreve esse método; não representa alegação de trabalho para clientes ou casos pessoais.

Sitemap no robots.txt: como adicionamos e verificamos

Nós tratamos Sitemap: como referência de descoberta, não como permissão de crawling.

Conferimos o XML primeiro

Abrimos o sitemap, verificamos status HTTP, HTTPS, host canônico e URLs indexáveis. Só então adicionamos uma URL absoluta:

Sitemap: https://example.com/sitemap.xml

Índice ou vários arquivos

Várias linhas Sitemap: são válidas. Quando existe um sitemap-index.xml estável, preferimos apontar para o índice para não manter a mesma lista em dois lugares.

Separamos hosts

O robots.txt do domínio principal não cobre automaticamente subdomínios. Em arquiteturas com loja, docs ou CDN, conferimos cada origem e usamos a guia de subdomínios quando o escopo é a dúvida principal.

Search Console continua útil

A linha no robots.txt ajuda descoberta, mas não substitui monitoramento. Um sitemap pode estar acessível e ainda listar redirects, noindex ou URLs não canônicas.

Validamos produção

Abrimos /robots.txt, cada sitemap e uma amostra de URLs; depois usamos o checker e o validator. Nosso padrão é uma referência absoluta, canônica e realmente publicada.

Guias relacionados