Gratis tool in de browser
Robots.txt-tester
Test robots.txt-regels, crawler-toegang en URL-paden in je browser.
Werkt lokaal. Er wordt niets geüpload.
Test een crawlerpad
Wijzig het bestand, de crawler of het pad om de uitkomst opnieuw te berekenen.
Décision du robot
Le résultat apparaît pendant la saisie.
Veelgestelde vragen
Test robots.txt-regels, crawler-toegang en URL-paden in je browser.
Veelgestelde vragen
Comment robots.txt choisit-il la règle ?
Le groupe user-agent le plus précis est choisi, puis le chemin correspondant le plus long gagne. Allow l’emporte en cas d’égalité.
Disallow supprime-t-il une page de Google ?
Non. Disallow bloque l’exploration, pas nécessairement l’indexation. Utilisez noindex si la page doit rester hors des résultats.
Que signifient * et $ ?
L’astérisque correspond à n’importe quelle suite de caractères. Le dollar ancre le motif à la fin de l’URL.
Mon robots.txt est-il envoyé ?
Non. L’analyse se fait entièrement dans votre navigateur.