Di Wix, kami mulai dari SEO & GEO → Tools and settings → Robots.txt Editor dan membandingkannya dengan file publik.
Kami membaca live file dulu
Ini membantu memahami default platform sebelum custom rule ditambahkan.
Reset to Default adalah jalur pemulihan
Jika custom rule sudah sulit dipertanggungjawabkan, Reset to Default mengembalikan baseline yang dikenal.
noindex berada di kontrol halaman
Untuk halaman publik di luar index, kami memakai pengaturan index/noindex yang tepat. Konten privat memakai password atau member access.
Kami memverifikasi setelah perubahan
Kami membuka kembali /robots.txt, memakai validator, dan menguji URL di tester.
Kami memisahkan fungsi
Robots.txt mengatur crawling, pengaturan halaman mengatur indexing, dan access control melindungi konten.
Kami cek dulu apa yang sudah dikelola Wix
Wix secara default membuka robots.txt, tetapi halaman tertentu dapat dibatasi oleh password, area member, atau pengaturan indexing. Karena itu laporan “blocked” tidak otomatis berarti Robots.txt Editor harus diubah. Kami lebih dulu memeriksa visibility, indexing, dan access control halaman.
Editor robots.txt kami perlakukan sebagai advanced override. Kami menyimpan versi live, menentukan URL yang memang harus berubah, membuat perubahan minimal, publish, lalu menguji ulang. Jika riwayat custom rule sudah sulit dipahami, Reset to Default menjadi bagian dari recovery plan.
Report dapat tertinggal dari kondisi live
Jika robots.txt publik sudah benar tetapi Search Console masih menunjukkan rule lama, kami tidak langsung membuat exception baru. Kami membandingkan live response, page setting, dan host yang dilaporkan agar kontrol native Wix dan crawler policy tetap konsisten.
