SearchVector Logo

SearchVector

Herramienta gratuita de SearchVector

Robots.txt Tester

4.9/5Rated by 2,261 users

Ingrese a un sitio web URL para buscar y probar su archivo robots.txt

Domain

Enter a site to test.

Fetch

Read the robots.txt.

Syntax

Validate every line.

Agents

Group rules per crawler.

Sitemap

Confirm it is declared.

Verdict

See what is blocked.

robots.txt

No syntax errors

searchvector.io/robots.txt

1

User-agent:

*

2

Disallow:

/dashboard/

3

Disallow:

/auth/

4

Allow:

/tools/

5

Sitemap:

/sitemap_index.xml

URL test

/tools/keyword-research

allowed

/dashboard/settings

blocked

Directives

2 disallow · 1 allow · 1 sitemap

robots.txt

No syntax errors

searchvector.io/robots.txt

1

User-agent:

*

2

Disallow:

/dashboard/

3

Disallow:

/auth/

4

Allow:

/tools/

5

Sitemap:

/sitemap_index.xml

URL test

/tools/keyword-research

allowed

/dashboard/settings

blocked

Directives

2 disallow · 1 allow · 1 sitemap

robots.txt

No syntax errors

searchvector.io/robots.txt

1

User-agent:

*

2

Disallow:

/dashboard/

3

Disallow:

/auth/

4

Allow:

/tools/

5

Sitemap:

/sitemap_index.xml

URL test

/tools/keyword-research

allowed

/dashboard/settings

blocked

Directives

2 disallow · 1 allow · 1 sitemap

Domain

Enter a site to test.

Fetch

Read the robots.txt.

Syntax

Validate every line.

Agents

Group rules per crawler.

Sitemap

Confirm it is declared.

Verdict

See what is blocked.

Valide y pruebe su archivo robots.txt. Verifique errores de sintaxis, analice directivas y verifique qué DNTTOken1 están bloqueados o permitidos para los rastreadores.

Parte de la plataforma SearchVector

Valida tu Robots.txt

Su archivo robots.txt controla cómo los motores de búsqueda rastrean su sitio web. Nuestra herramienta lo ayuda a validar la sintaxis, identificar errores y garantizar que sus directivas funcionen según lo previsto.

Obtenga robots.txt de cualquier URL o pegue su propio contenido para su validación. Obtenga un análisis detallado de los agentes de usuario, reglas de permitir/no permitir y mapas de sitio.

What the tester covers

04 items

Syntax Validation

01

Compruebe si hay errores de sintaxis y directivas no válidas en su robots.txt.

Directive Analysis

02

Vea todos los agentes de usuario, permita/no permita reglas y retrasos en el rastreo.

Sitemap Detection

03

Identifique todos los mapas de sitio a los que se hace referencia en su robots.txt.

Gratis para siempre

04

No requiere registro. Parte de nuestro kit gratuito de herramientas SEO para todos.

How it works

From a file to a crawl verdict

Prueba tu robots.txt en segundos

01

Ingresa la URL

Ingrese a cualquier sitio web URL para buscar su archivo robots.txt.

02

Analizar archivo

Nuestra herramienta analiza y valida todas las directivas en el robots.txt.

03

Ver resultados

Vea errores, advertencias, agentes de usuario, reglas y mapas de sitio.

Workflow

Potentes funciones

Comprehensive robots.txt testing

01

Syntax Validation

Identifique errores de sintaxis y formato no válidos.

02

User-Agent Analysis

Vea todos los agentes de usuario y sus reglas específicas.

03

Disallow Rules

Vea todas las rutas bloqueadas para cada agente de usuario.

04

Allow Rules

Consulte rutas y anulaciones permitidas explícitamente.

05

Sitemap Detection

Encuentre todos los mapas de sitio a los que se hace referencia en robots.txt.

06

Error Detection

Reciba advertencias sobre posibles problemas y errores.

Robots.txt questions

Common questions about robots.txt testing

¿Este probador robots.txt es gratuito?

¡Sí! El Robots.txt Tester es completamente gratuito y no es necesario registrarse. Es parte del kit de herramientas gratuito SEO de SearchVector.

¿Qué errores puedes detectar?

Detectamos errores de sintaxis, dos puntos faltantes, directivas no válidas, reglas sin agentes de usuario y otros errores comunes en los archivos robots.txt.

¿Puedo realizar pruebas antes de implementar?

¡Sí! Puede pegar su contenido robots.txt directamente para validarlo antes de implementarlo en su servidor.

¿Qué otras herramientas ofrece SearchVector?

SearchVector ofrece Keyword Research, seguimiento de clasificación, análisis GSC, monitoreo de Core Web Vitals, análisis de mapas del sitio y más.

¿Por qué es importante robots.txt?

Robots.txt controla cómo los motores de búsqueda rastrean su sitio. Los errores pueden bloquear accidentalmente la indexación de páginas importantes o permitir el rastreo de áreas confidenciales.

Still have questions? Contact support

Ready to go further?

¿Listo para mejorar tus rankings de búsqueda?

Robots.txt es solo una parte del SEO técnico. El panel de SearchVector le brinda auditorías integrales del sitio, seguimiento de clasificación y más.

Iniciar prueba gratuita