Gratuïtes i sense compte

Tester de robots.txt

Enganxeu el text robots.txt, introduïu un testimoni de producte del rastrejador i proveu fins a 100 URL. Els resultats es calculen en aquest dispositiu; no s'obté ni es carrega res.

Enganxeu les regles aquí. Màxim 200 KB, 5.000 línies i 2.000 regles de permetre/no permetre.

Exemple: Googlebot. Introduïu només el testimoni, no una cadena completa d'agent d'usuari del navegador.

Introduïu un URL HTTP o HTTPS complet per línia, fins a 100. Aquesta eina no els obre.

Aquesta és una vista prèvia local de les regles comunes de permetre/no permetre, no un emulador complet per a cada rastrejador. Les directives no admeses s'informen com a ignorades. robots.txt no és control d'accés i no garanteix el rastreig, la indexació o la classificació.

Com puc provar una regla de robots.txt?

Enganxeu el contingut del fitxer, introduïu un testimoni de rastrejador com ara Googlebot, afegiu un URL complet per línia i trieu Regles de prova. La previsualització mostra el grup seleccionat i la regla de concordança, si n'hi ha.

Preguntes freqüents

Com puc provar una regla de robots.txt?

Enganxeu el contingut del fitxer, introduïu un testimoni de rastrejador com ara Googlebot, afegiu un URL complet per línia i trieu Regles de prova. La previsualització mostra el grup seleccionat i la regla de concordança, si n'hi ha.

Aquest verificador recupera el meu lloc web o penja els meus URL?

No. Només llegeix el text i els URL que introduïu en aquest navegador. No recupera robots.txt, no visita URL ni penja les teves dades.

El fitxer robots.txt impedeix que la gent obri una pàgina?

No. Dóna instruccions del rastrejador; no protegeix les dades privades. Utilitzeu l'autenticació o els controls d'accés al servidor per a pàgines privades.

Un URL permès ha d'aparèixer als resultats de la cerca?

No. Permetre un rastreig no garanteix que un motor de cerca rastregi, indexi o classifiqui un URL.

Aquesta eina verifica Google, Bing o un altre rastrejador en directe?

No. Previsualitza les regles comunes per al testimoni del rastrejador que introduïu. No contacta amb cap motor de cerca o lloc web.