Ferramenta grátis no navegador
Testador de robots.txt
Teste regras do robots.txt, acesso de crawlers e caminhos de URL no navegador.
Executa localmente. Nada é enviado.
Teste um caminho de crawler
Altere o arquivo, crawler ou caminho para recalcular o resultado.
Decisão do crawler
O resultado aparece enquanto você digita.
Perguntas frequentes
Teste regras do robots.txt, acesso de crawlers e caminhos de URL no navegador.
Perguntas frequentes
Como o robots.txt escolhe a regra?
O grupo de user-agent mais específico é selecionado e o caminho correspondente mais longo vence. Allow vence em empate.
Disallow remove uma página do Google?
Não. Ele bloqueia o rastreamento, não necessariamente a indexação. Use noindex se a página deve ficar fora dos resultados.
O que significam * e $?
O asterisco corresponde a qualquer sequência de caracteres e o cifrão prende o padrão ao final da URL.
Meu robots.txt é enviado?
Não. A análise acontece toda no navegador.