Outil gratuit par SearchVector
Robots.txt Tester
Saisissez l'URL d'un site web pour récupérer et tester son fichier robots.txt
Domain
Enter a site to test.
Fetch
Read the robots.txt.
Syntax
Validate every line.
Agents
Group rules per crawler.
Sitemap
Confirm it is declared.
Verdict
See what is blocked.
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
Domain
Enter a site to test.
Fetch
Read the robots.txt.
Syntax
Validate every line.
Agents
Group rules per crawler.
Sitemap
Confirm it is declared.
Verdict
See what is blocked.
Validez et testez votre fichier robots.txt. Vérifiez les erreurs de syntaxe, analysez les directives et voyez quelles URL sont bloquées ou autorisées pour les crawlers.
Validez votre Robots.txt
Votre fichier robots.txt contrôle la manière dont les moteurs de recherche crawlent votre site. Notre outil vous aide à valider la syntaxe, à identifier les erreurs et à vérifier que vos directives fonctionnent comme prévu.
Récupérez le robots.txt depuis n'importe quelle URL ou collez votre propre contenu pour le valider. Obtenez une analyse détaillée des user-agents, des règles allow/disallow et des sitemaps.
What the tester covers
Validation de la syntaxe
Included
Recherchez les erreurs de syntaxe et les directives non valides dans votre robots.txt.
Analyse des directives
Included
Consultez tous les user-agents, les règles allow/disallow et les délais de crawl.
Détection des sitemaps
Included
Identifiez tous les sitemaps référencés dans votre robots.txt.
Gratuit pour toujours
Included
Aucune inscription requise. Fait partie de notre boîte à outils SEO gratuite pour tous.
How it works
From a file to a crawl verdict
Testez votre robots.txt en quelques secondes
01
Saisissez l'URL
Saisissez l'URL de n'importe quel site web pour récupérer son fichier robots.txt.
02
Analysez le fichier
Notre outil parse et valide toutes les directives du robots.txt.
03
Consultez les résultats
Consultez les erreurs, avertissements, user-agents, règles et sitemaps.
Fonctionnalités puissantes
Test complet de robots.txt
Validation de la syntaxe
Identifiez la syntaxe non valide et les erreurs de formatage.
Analyse des user-agents
Consultez tous les user-agents et leurs règles spécifiques.
Règles Disallow
Consultez tous les chemins bloqués pour chaque user-agent.
Règles Allow
Consultez les chemins explicitement autorisés et les exceptions.
Détection des sitemaps
Trouvez tous les sitemaps référencés dans robots.txt.
Détection des erreurs
Recevez des avertissements sur les problèmes potentiels et les erreurs.
Robots.txt Questions
Questions fréquentes sur le test de robots.txt