編集チームでは、Sitemap:をAllowやDisallowとは別の発見シグナルとして扱います。
先にSitemap本体を確認します
XMLのHTTPステータス、HTTPS、正規ホスト、掲載URLを確認してから絶対URLを記述します。
Sitemap: https://example.com/sitemap.xml
相対URLだけを書く運用は避けます。
複数ファイルとindexを整理します
複数のSitemap:行は利用できます。ただし安定したsitemap indexがある場合は、子ファイルをrobots.txtにも重複管理せずindexを優先します。
Sitemap: https://example.com/sitemap-index.xml
ホストごとの範囲を分けて確認します
ルートドメインとサブドメインは別のrobots.txt範囲です。複数ホストを使う構成では、各originを確認し、必要ならサブドメインのガイドも参照します。
Search Consoleも併用します
robots.txt内の参照は発見を助けますが、サイトマップ品質を保証しません。redirect、noindex、非canonical URLが含まれていないかも確認します。
本番で最終確認します
本番/robots.txt、各Sitemap URL、XML内の代表URLを開き、checkerとvalidatorで公開状態をチェックします。
