Uso gratuito, sem necessidade de conta
Testador robots.txt
Cole o texto robots.txt, insira um token de produto do rastreador e teste até 100 URLs. Os resultados são calculados neste dispositivo; nada é buscado ou carregado.
Como faço para testar uma regra robots.txt?
Cole o conteúdo do arquivo, insira um token do rastreador como o Googlebot, adicione um URL completo por linha e escolha Testar regras. A visualização mostra o grupo selecionado e a regra correspondente, se houver.
Perguntas frequentes
Como faço para testar uma regra robots.txt?
Cole o conteúdo do arquivo, insira um token do rastreador como o Googlebot, adicione um URL completo por linha e escolha Testar regras. A visualização mostra o grupo selecionado e a regra correspondente, se houver.
Este testador busca meu site ou carrega meus URLs?
Não. Ele apenas lê o texto e os URLs inseridos neste navegador. Ele não busca robots.txt, visita URLs nem carrega seus dados.
O robots.txt impede que as pessoas abram uma página?
Não. Ele fornece instruções ao rastreador; não protege dados privados. Use autenticação ou controles de acesso ao servidor para páginas privadas.
Um URL permitido precisa aparecer nos resultados da pesquisa?
Não. Permitir um rastreamento não garante que um mecanismo de pesquisa rastreará, indexará ou classificará um URL.
Esta ferramenta verifica o Google, o Bing ou outro rastreador ao vivo?
Não. Ele visualiza regras comuns para o token do rastreador inserido. Ele não entra em contato com nenhum mecanismo de pesquisa ou site.