Cara kerja pencocokan Allow/Disallow
Crawler memilih aturan Allow atau Disallow yang paling spesifik untuk grup user-agent mereka. Penguji ini menerapkan subset praktis aturan umum agar Anda bisa menemukan blokir yang tidak sengaja sebelum deploy.
Penguji robots.txt
Uji bagaimana file robots.txt memperlakukan sebuah path untuk user-agent tertentu. Lihat grup agen yang cocok dan alasan singkat allow atau disallow.
Cara kerja
- 1
Isi field formulir.
- 2
Ubah mode jika ada.
- 3
Salin keluaran saat sudah benar (sering langsung).
Mengapa menggunakan alat ini
- Berjalan sepenuhnya di browser Anda — tidak ada data yang diunggah ke server.
- 100% gratis, tanpa perlu daftar dan tanpa batas.
- Berjalan di browser modern — tanpa aplikasi, ekstensi, atau akun.
Cara menggunakan Penguji robots.txt
Lengkapi field di Penguji robots.txt. Keluaran dibuat di browser.
Tips untuk hasil yang lebih baik
Kosongkan field opsional untuk hasil minimal.
Privasi dan pemrosesan di browser
Jika memungkinkan, Penguji robots.txt memproses data secara lokal dengan JavaScript di halaman ini. Draf, rahasia, dan pekerjaan yang belum selesai tetap di perangkat Anda secara default. Gunakan alur ini saat Anda tidak ingin mengunggah teks sensitif, token, kata sandi, atau file ke layanan pihak ketiga.
Pertanyaan yang sering diajukan
Apakah ini mengambil robots.txt live saya?
Tidak. Tempel sendiri isi filenya—tidak ada yang diambil dari situs Anda.
Apakah ini simulator Googlebot lengkap?
Mencakup pola Allow/Disallow umum dengan wildcard. Kasus tepi di crawler nyata masih bisa berbeda.
Apakah data saya diunggah saat memakai alat ini?
Untuk sebagian besar alat FlyUtils, tidak. Pemrosesan terjadi di browser dengan JavaScript. Jika suatu alat membutuhkan server, itu akan dijelaskan di halaman.
Apakah Penguji robots.txt gratis?
Ya. Penguji robots.txt gratis, tanpa daftar, dan tanpa batas artifisial untuk penggunaan pribadi maupun kerja sehari-hari.
Apakah Penguji robots.txt bekerja di ponsel?
Ya. Halaman ini mobile-first sehingga Anda bisa menempel input, mengatur opsi, dan menyalin hasil dari ponsel atau tablet.