Définissez le user-agent et les chemins allow/disallow pour générer un fichier robots.txt prêt à l’emploi.
Remplissez les champs du formulaire.
Changez de mode si besoin.
Copiez la sortie quand elle convient (souvent en direct).
Le fichier robots.txt indique aux robots des moteurs de recherche quelles parties de votre site ils peuvent ou non explorer. Il ne garantit pas que les pages restent hors des résultats de recherche, mais c’est la façon standard de guider les robots bien élevés.
Complétez les champs de Générateur de Robots.txt. La sortie est produite dans le navigateur.
Laissez les champs optionnels vides pour un résultat minimal.
Dans la mesure du possible, Générateur de Robots.txt traite vos données localement avec JavaScript sur cette page. Brouillons, secrets et travaux en cours restent sur votre appareil par défaut. Préférez ce flux quand vous ne voulez pas envoyer de texte sensible, jetons, mots de passe ou fichiers à un service tiers.
Pas de manière fiable — utilisez une balise meta noindex pour cela. Robots.txt ne contrôle que l’exploration, pas l’indexation.
Il doit être placé à la racine de votre domaine, ex : https://exemple.com/robots.txt, pour être reconnu par les robots.
Pour la plupart des outils FlyUtils, non. Le traitement se fait dans votre navigateur avec JavaScript. Si un outil a besoin d’un serveur, ce sera indiqué clairement sur la page.
Oui. Générateur de Robots.txt est gratuit, sans inscription et sans limites artificielles pour un usage personnel ou professionnel courant.
Oui. La page est mobile-first : vous pouvez coller du contenu, régler les options et copier le résultat depuis un téléphone ou une tablette.