Kullanıma hazır bir robots.txt dosyası oluşturmak için user-agent ve allow/disallow yollarını ayarlayın.
Form alanlarını doldurun.
Varsa modları değiştirin.
Doğru göründüğünde çıktıyı kopyalayın (çoğu zaman canlı).
Robots.txt dosyası, arama motoru tarayıcılarına sitenizin hangi bölümlerine erişebileceklerini veya erişemeyeceklerini bildirir. Sayfaların arama sonuçlarından uzak kalacağını garanti etmez, ancak iyi davranan tarayıcıları yönlendirmenin standart yoludur.
Robots.txt Oluşturucu alanlarını doldurun. Çıktı tarayıcıda üretilir.
Minimal sonuç için isteğe bağlı alanları boş bırakın.
Mümkün olduğunda Robots.txt Oluşturucu, verilerinizi bu sayfada JavaScript ile yerel olarak işler. Taslaklar, gizli bilgiler ve yarım kalan işler varsayılan olarak cihazınızda kalır. Hassas metin, belirteç, parola veya dosyaları üçüncü taraf bir hizmete yüklemek istemediğinizde bu akışı tercih edin.
Güvenilir bir şekilde değil — bunun için bir noindex meta etiketi kullanın. Robots.txt yalnızca taramayı kontrol eder, indekslemeyi değil.
Tarayıcılar tarafından tanınması için alanınızın köküne yerleştirilmelidir, örn. https://ornek.com/robots.txt.
Çoğu FlyUtils aracında hayır. İşleme tarayıcınızda JavaScript ile yapılır. Bir aracın sunucuya ihtiyacı olursa bu sayfada açıkça belirtilir.
Evet. Robots.txt Oluşturucu ücretsizdir; kayıt gerekmez ve olağan kişisel/iş kullanımı için yapay limit yoktur.
Evet. Sayfa mobil önceliklidir; telefondan veya tablekten girdi yapıştırabilir, seçenekleri ayarlayabilir ve sonucu kopyalayabilirsiniz.