Ferramenta Free de SearchVector

Robots.txt Testador

4.9/5Rated by 2,261 users

Insira um site URL para buscar e testar seu arquivo robots.txt

Domain

Enter a site to test.

Fetch

Read the robots.txt.

Syntax

Validate every line.

Agents

Group rules per crawler.

Sitemap

Confirm it is declared.

Verdict

See what is blocked.

robots.txt

No syntax errors

searchvector.io/robots.txt

1

User-agent:

*

2

Disallow:

/dashboard/

3

Disallow:

/auth/

4

Allow:

/tools/

5

Sitemap:

/sitemap_index.xml

URL test

/tools/keyword-research

allowed

/dashboard/settings

blocked

Directives

2 disallow · 1 allow · 1 sitemap

robots.txt

No syntax errors

searchvector.io/robots.txt

1

User-agent:

*

2

Disallow:

/dashboard/

3

Disallow:

/auth/

4

Allow:

/tools/

5

Sitemap:

/sitemap_index.xml

URL test

/tools/keyword-research

allowed

/dashboard/settings

blocked

Directives

2 disallow · 1 allow · 1 sitemap

robots.txt

No syntax errors

searchvector.io/robots.txt

1

User-agent:

*

2

Disallow:

/dashboard/

3

Disallow:

/auth/

4

Allow:

/tools/

5

Sitemap:

/sitemap_index.xml

URL test

/tools/keyword-research

allowed

/dashboard/settings

blocked

Directives

2 disallow · 1 allow · 1 sitemap

Domain

Enter a site to test.

Fetch

Read the robots.txt.

Syntax

Validate every line.

Agents

Group rules per crawler.

Sitemap

Confirm it is declared.

Verdict

See what is blocked.

Valide e teste seu arquivo robots.txt. Verifique erros de sintaxe, analise diretivas e verifique quais URLs estão bloqueados ou permitidos para rastreadores.

Valide seu Robots.txt

Seu arquivo robots.txt controla como os mecanismos de pesquisa rastreiam seu site. Nossa ferramenta ajuda você a validar a sintaxe, identificar erros e garantir que suas diretivas funcionem conforme esperado.

Obtenha robots.txt de qualquer URL ou cole seu próprio conteúdo para validação. Obtenha análises detalhadas de agentes de usuários, regras de permissão/proibição e mapas de sites.

What the tester covers

Validação de sintaxe

Included

Verifique se há erros de sintaxe e diretivas inválidas em seu robots.txt.

Análise de diretiva

Included

Veja todos os agentes de usuário, regras de permissão/proibição e atrasos de rastreamento.

Detecção de sitemap

Included

Identifique todos os sitemaps referenciados em seu robots.txt.

Free Para sempre

Included

Não é necessária inscrição. Parte do nosso kit de ferramentas SEO gratuito para todos.

How it works

From a file to a crawl verdict

Teste seu robots.txt em segundos

01

Digite URL

Entre em qualquer site URL para buscar seu Arquivo robots.txt.

02

Analisar arquivo

Nossa ferramenta analisa e valida todas as diretivas no robots.txt.

03

Ver resultados

Veja erros, avisos, agentes de usuário, regras e mapas de sites.

Workflow

Recursos poderosos do Features

Teste robots.txt abrangente

Validação de sintaxe

Identifique erros inválidos de sintaxe e formatação. Análise do agente do usuário

User-Agent Analysis

Veja todos os user-agents e suas regras específicas.

Regras de proibição

Visualize todos os caminhos bloqueados para cada agente de usuário.

Permitir regras

Veja caminhos e substituições explicitamente permitidos.

Detecção de mapa de site

Encontre todos os mapas de site referenciados em robots.txt.

Detecção de erros

Receba avisos sobre possíveis problemas e erros.

FAQ

Robots.txt Questions

Perguntas comuns sobre testes robots.txt

Pronto para aumentar suas classificações de pesquisa?

Robots.txt é apenas uma peça técnica do SEO. O painel do SearchVector oferece auditorias abrangentes do site, rastreamento de classificação e muito mais.