Uso gratuito, sin necesidad de cuenta
Probador de robots.txt
Pegue el texto robots.txt, ingrese un token de producto de rastreador y pruebe hasta 100 URL. Los resultados se calculan en este dispositivo; no se recupera ni se carga nada.
¿Cómo pruebo una regla de robots.txt?
Pegue el contenido del archivo, ingrese un token de rastreador como Googlebot, agregue una URL completa por línea y elija Probar reglas. La vista previa muestra el grupo seleccionado y la regla coincidente, si corresponde.
Preguntas frecuentes
¿Cómo pruebo una regla de robots.txt?
Pegue el contenido del archivo, ingrese un token de rastreador como Googlebot, agregue una URL completa por línea y elija Probar reglas. La vista previa muestra el grupo seleccionado y la regla coincidente, si corresponde.
¿Este evaluador busca mi sitio web o carga mis URL?
No. Solo lee el texto y las URL que ingresas en este navegador. No busca robots.txt, no visita URL ni carga sus datos.
¿El archivo robots.txt impide que las personas abran una página?
No. Da instrucciones al rastreador; no protege datos privados. Utilice controles de autenticación o acceso al servidor para páginas privadas.
¿Tiene que aparecer una URL permitida en los resultados de búsqueda?
No. Permitir un rastreo no garantiza que un motor de búsqueda rastree, indexe o clasifique una URL.
¿Esta herramienta verifica en vivo Google, Bing u otro rastreador?
No. Muestra una vista previa de las reglas comunes para el token de rastreador que ingresa. No contacta con ningún motor de búsqueda o sitio web.