Herramienta gratuita de SearchVector
Robots.txt Tester
Ingrese a un sitio web URL para buscar y probar su archivo robots.txt
Domain
Enter a site to test.
Fetch
Read the robots.txt.
Syntax
Validate every line.
Agents
Group rules per crawler.
Sitemap
Confirm it is declared.
Verdict
See what is blocked.
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
Domain
Enter a site to test.
Fetch
Read the robots.txt.
Syntax
Validate every line.
Agents
Group rules per crawler.
Sitemap
Confirm it is declared.
Verdict
See what is blocked.
Valide y pruebe su archivo robots.txt. Verifique errores de sintaxis, analice directivas y compruebe qué URL están bloqueadas o permitidas para los rastreadores.
Valida tu Robots.txt
Su archivo robots.txt controla cómo los motores de búsqueda rastrean su sitio web. Nuestra herramienta lo ayuda a validar la sintaxis, identificar errores y garantizar que sus directivas funcionen según lo previsto.
Obtenga robots.txt de cualquier URL o pegue su propio contenido para su validación. Obtenga un análisis detallado de los agentes de usuario, reglas de permitir/no permitir y mapas de sitio.
What the tester covers
Validación de sintaxis
Included
Compruebe si hay errores de sintaxis y directivas no válidas en su robots.txt.
Análisis de directivas
Included
Vea todos los agentes de usuario, permita/no permita reglas y retrasos en el rastreo.
Detección de sitemaps
Included
Identifique todos los mapas de sitio a los que se hace referencia en su robots.txt.
Gratis para siempre
Included
No requiere registro. Parte de nuestro kit gratuito de herramientas SEO para todos.
How it works
From a file to a crawl verdict
Prueba tu robots.txt en segundos
01
Ingresa la URL
Ingrese a cualquier sitio web URL para buscar su archivo robots.txt.
02
Analizar archivo
Nuestra herramienta analiza y valida todas las directivas en el robots.txt.
03
Ver resultados
Vea errores, advertencias, agentes de usuario, reglas y mapas de sitio.
Potentes funciones
Pruebas completas de robots.txt
Validación de sintaxis
Identifique errores de sintaxis y formato no válidos.
Análisis de agentes de usuario
Vea todos los agentes de usuario y sus reglas específicas.
Reglas Disallow
Vea todas las rutas bloqueadas para cada agente de usuario.
Reglas Allow
Consulte rutas y anulaciones permitidas explícitamente.
Detección de sitemaps
Encuentre todos los mapas de sitio a los que se hace referencia en robots.txt.
Detección de errores
Reciba advertencias sobre posibles problemas y errores.
Robots.txt Questions
Preguntas comunes sobre las pruebas de robots.txt