Bir robots.txt dosyasının belirli bir user-agent için bir yolu nasıl ele aldığını test edin. Eşleşen ajan grubunu ve allow/disallow için kısa gerekçeyi görün.
Form alanlarını doldurun.
Varsa modları değiştirin.
Doğru göründüğünde çıktıyı kopyalayın (çoğu zaman canlı).
Crawler’lar user-agent grupları için en spesifik eşleşen Allow veya Disallow kuralını seçer. Bu test aracı, yaygın kuralların pratik bir alt kümesini uygular; böylece dağıtımdan önce yanlışlıkla engellemeleri fark edebilirsiniz.
robots.txt Test Aracı alanlarını doldurun. Çıktı tarayıcıda üretilir.
Minimal sonuç için isteğe bağlı alanları boş bırakın.
Mümkün olduğunda robots.txt Test Aracı, verilerinizi bu sayfada JavaScript ile yerel olarak işler. Taslaklar, gizli bilgiler ve yarım kalan işler varsayılan olarak cihazınızda kalır. Hassas metin, belirteç, parola veya dosyaları üçüncü taraf bir hizmete yüklemek istemediğinizde bu akışı tercih edin.
Hayır. Dosya içeriğini kendiniz yapıştırın—sitenizden hiçbir şey indirilmez.
Joker karakterli yaygın Allow/Disallow kalıplarını kapsar. Gerçek crawler’lardaki uç durumlar hâlâ farklı olabilir.
Çoğu FlyUtils aracında hayır. İşleme tarayıcınızda JavaScript ile yapılır. Bir aracın sunucuya ihtiyacı olursa bu sayfada açıkça belirtilir.
Evet. robots.txt Test Aracı ücretsizdir; kayıt gerekmez ve olağan kişisel/iş kullanımı için yapay limit yoktur.
Evet. Sayfa mobil önceliklidir; telefondan veya tablekten girdi yapıştırabilir, seçenekleri ayarlayabilir ve sonucu kopyalayabilirsiniz.