Robots.txt Tools
Validator robots.txt
Tempel file robots.txt untuk menemukan error sintaks, aturan yang memblokir seluruh situs, direktif Sitemap tidak valid, dan peringatan kompatibilitas.
Tempel robots.txt
Validasi berjalan secara lokal di browser saat Anda mengedit.
Ukuran file
74 byte
Baris
5
Grup User-agent
1
Sitemap
1
RFC 9309
Lulus
Lulus
Bing
Lulus
Tidak ada masalah terdeteksi
Tidak ada diagnosis dalam cakupan yang dipilih yang dipicu oleh file saat ini.
Pemeriksaan kompatibilitas adalah diagnosis praktis, bukan jaminan bahwa setiap crawler menerapkan setiap direktif non-standar dengan cara yang sama.
Sumber beranotasi
Baris bermasalah disorot di bawah. Klik sebuah baris untuk memilih baris yang sama pada editor di atas.
Yang diperiksa validator ini
Validator memeriksa format direktif, pengelompokan User-agent, URL Sitemap, aturan Disallow berbahaya, dan direktif non-standar. Crawl-delay juga ditandai karena Googlebot tidak mendukungnya.
Perlu membuat file terlebih dahulu?
Mulai dari generator, lalu kembali ke sini untuk validasi yang lebih terfokus.
Buka Generator robots.txt →RFC 9309
Pemeriksaan kompatibilitas adalah diagnosis praktis, bukan jaminan bahwa setiap crawler menerapkan setiap direktif non-standar dengan cara yang sama.
Sumber beranotasi
Baris bermasalah disorot di bawah. Klik sebuah baris untuk memilih baris yang sama pada editor di atas.
Tidak ada masalah terdeteksi
Tidak ada diagnosis dalam cakupan yang dipilih yang dipicu oleh file saat ini.
Referensi teknis
Aturan dan panduan khusus crawler diperiksa terhadap standar utama dan dokumentasi penyedia, bukan disalin dari alat SEO lain.
- RFC 9309
Sintaks, pencocokan, pengelompokan, dan perilaku percent-encoding dalam Robots Exclusion Protocol.
- Spesifikasi robots.txt Google
Perilaku robots.txt khusus Google dan field yang didukung.