Cómo funciona el matching Allow/Disallow
Los crawlers eligen la regla Allow o Disallow más específica para su grupo de user-agent. Este probador aplica un subconjunto práctico de reglas comunes para detectar bloqueos accidentales antes del deploy.
Prueba cómo un robots.txt trata una ruta para un user-agent. Ve el grupo de agente coincidente y un breve motivo de allow o disallow.
Completa los campos del formulario.
Cambia modos si existen.
Copia la salida cuando esté bien (a menudo en vivo).
Los crawlers eligen la regla Allow o Disallow más específica para su grupo de user-agent. Este probador aplica un subconjunto práctico de reglas comunes para detectar bloqueos accidentales antes del deploy.
Completa los campos en Probador de robots.txt. La salida se genera en el navegador.
Deja opcionales vacíos para un resultado mínimo.
Siempre que sea posible, Probador de robots.txt procesa tus datos localmente con JavaScript en esta página. Borradores, secretos y trabajo en curso se quedan en tu dispositivo por defecto. Usa este flujo cuando no quieras subir texto sensible, tokens, contraseñas o archivos a un servicio de terceros.
No. Pega el contenido del archivo tú mismo—no se descarga nada de tu sitio.
Cubre patrones comunes de Allow/Disallow con comodines. Los casos límite en crawlers reales aún pueden diferir.
En la mayoría de las herramientas de FlyUtils, no. El procesamiento ocurre en tu navegador con JavaScript. Si alguna necesita servidor, se indicará claramente en la página.
Sí. Probador de robots.txt es gratis, sin registro y sin límites artificiales para uso personal y profesional habitual.
Sí. La página es mobile-first: puedes pegar contenido, ajustar opciones y copiar resultados desde el teléfono o la tablet.