Pruebas de reglas explicables
Probador de robots.txt
Pega un archivo robots.txt, elige un rastreador y prueba una URL. El resultado explica qué grupo User-agent coincide y cuál es la regla Allow o Disallow más específica.
Reglas de robots.txt
Pega reglas, carga un archivo público o envía reglas aquí directamente desde el Generador.
Resultado de la prueba
Las decisiones usan el mismo motor de coincidencia que el Comprobador y los diagnósticos del Generador.
Bloqueado
https://example.com/admin/login
La regla Disallow de la línea 2 es la regla coincidente más específica.
Traza de la decisión
- Grupo del rastreador
- * (alternativa comodín)
- Regla ganadora
- Disallow: /admin/
- Línea de origen
- 2
- Especificidad de la regla
- 7 bytes normalizados
Comparación de rastreadores
Compara la primera URL probada con tokens de rastreadores de búsqueda, búsqueda con IA y control de IA: https://example.com/admin/login
Googlebot
Búsqueda
Disallow: /admin/
Bingbot
Búsqueda
Disallow: /admin/
OAI-SearchBot
Búsqueda con IA
Disallow: /admin/
GPTBot
Control / entrenamiento de IA
Disallow: /admin/
Claude-SearchBot
Búsqueda con IA
Disallow: /admin/
ClaudeBot
Control / entrenamiento de IA
Disallow: /admin/
PerplexityBot
Búsqueda con IA
Disallow: /admin/
Google-Extended
Control / entrenamiento de IA
Disallow: /admin/
Por qué importa la regla ganadora
La coincidencia de robots.txt no funciona simplemente con “la primera regla gana”. El rastreador selecciona el grupo User-agent aplicable y después evalúa los patrones Allow y Disallow que coinciden. Este probador muestra la regla utilizada para tomar la decisión en lugar de devolver solo un sí o un no.
Validar el archivo completo →Traza de la decisión
Las decisiones usan el mismo motor de coincidencia que el Comprobador y los diagnósticos del Generador.
Comparación de rastreadores
Las reglas interpretables siguen evaluándose cuando solo existen advertencias.
URLs en lote
Hasta 100 líneas únicas y no vacías por ejecución.
Referencias técnicas
Las reglas y la orientación específica de cada rastreador se contrastan con estándares primarios y documentación de los proveedores, en lugar de copiarse de otras herramientas SEO.
- RFC 9309
Sintaxis del Protocolo de Exclusión de Robots, coincidencia, agrupación y comportamiento de codificación porcentual.
- Especificación de robots.txt de Google
Comportamiento específico de robots.txt en Google y campos compatibles.