Guides robots.txt

Sitemap dans robots.txt : comment nous l’ajoutons et le vérifions

Notre méthode pour Sitemap:, URL absolues, plusieurs fichiers, sitemap index et contrôle de la réponse publiée.

Par Robots.txt Tools Editorial TeamDernière vérification le 2026-09-131 min de lecture

Méthode éditoriale : ce guide documente le processus de vérification de l’équipe éditoriale Robots.txt Tools. La première personne décrit cette méthode et ne revendique ni mission client ni étude de cas personnelle.

Sitemap dans robots.txt : comment nous l’ajoutons et le vérifions

Nous considérons Sitemap: comme un signal de découverte, pas comme une règle Allow ou Disallow.

Nous contrôlons d’abord le sitemap

Nous ouvrons le XML, vérifions le statut HTTP, HTTPS, l’hôte canonique et les URL indexables. Ensuite nous utilisons une URL absolue :

Sitemap: https://example.com/sitemap.xml

Plusieurs fichiers ou un index

Plusieurs lignes Sitemap: sont valides. Lorsqu’un sitemap index stable existe, nous préférons le référencer pour éviter de maintenir deux inventaires.

Sitemap: https://example.com/sitemap-index.xml

Nous séparons les hôtes

Le robots.txt de example.com ne gouverne pas automatiquement shop.example.com. Pour les architectures multi-hôtes, nous vérifions chaque origine et utilisons le guide des sous-domaines.

Search Console complète la vérification

La déclaration facilite la découverte, mais ne garantit pas la qualité du sitemap. Nous contrôlons aussi les redirections, noindex et URL non canoniques.

Nous vérifions la production

Après publication, nous ouvrons /robots.txt, chaque sitemap, puis utilisons le checker et le validator.

Guides associés