SearchVector의 무료 도구
Robots.txt Tester
robots.txt 파일을 가져와 테스트할 웹사이트 URL을 입력하세요
Domain
Enter a site to test.
Fetch
Read the robots.txt.
Syntax
Validate every line.
Agents
Group rules per crawler.
Sitemap
Confirm it is declared.
Verdict
See what is blocked.
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
robots.txt
No syntax errors
searchvector.io/robots.txt
1
User-agent:
*
2
Disallow:
/dashboard/
3
Disallow:
/auth/
4
Allow:
/tools/
5
Sitemap:
/sitemap_index.xml
URL test
/tools/keyword-research
allowed
/dashboard/settings
blocked
Directives
2 disallow · 1 allow · 1 sitemap
Domain
Enter a site to test.
Fetch
Read the robots.txt.
Syntax
Validate every line.
Agents
Group rules per crawler.
Sitemap
Confirm it is declared.
Verdict
See what is blocked.
robots.txt 파일을 검증하고 테스트하세요. 구문 오류를 확인하고 지시문을 분석하며, 어떤 URL이 크롤러에 대해 차단 또는 허용되는지 확인할 수 있습니다.
내 Robots.txt
robots.txt 파일은 검색 엔진이 웹사이트를 크롤링하는 방식을 제어합니다. 이 도구는 구문을 검증하고 오류를 식별하며 지시문이 의도대로 작동하는지 확인하도록 도와줍니다.
어떤 URL에서든 robots.txt를 가져오거나 직접 내용을 붙여넣어 검증하세요. user-agent, allow/disallow 규칙, Sitemap에 대한 상세 분석을 받을 수 있습니다.
What the tester covers
구문 검증
Included
robots.txt의 구문 오류와 잘못된 지시문을 확인하세요.
지시문 분석
Included
모든 user-agent, allow/disallow 규칙, crawl delay를 확인하세요.
Sitemap 감지
Included
robots.txt에서 참조하는 모든 Sitemap을 식별하세요.
영구 무료
Included
가입이 필요 없습니다. 누구나 사용할 수 있는 무료 SEO 도구 모음의 일부입니다.
How it works
From a file to a crawl verdict
몇 초 만에 robots.txt를 테스트하세요
01
URL 입력
robots.txt 파일을 가져올 웹사이트 URL을 입력하세요.
02
파일 분석
이 도구가 robots.txt의 모든 지시문을 파싱하고 검증합니다.
03
결과 확인
오류, 경고, user-agent, 규칙, Sitemap을 확인하세요.
강력한 기능
종합적인 robots.txt 테스트
구문 검증
잘못된 구문과 형식 오류를 식별하세요.
User-Agent 분석
모든 user-agent와 해당 규칙을 확인하세요.
Disallow 규칙
각 user-agent별로 차단된 모든 경로를 확인하세요.
Allow 규칙
명시적으로 허용된 경로와 재정의 규칙을 확인하세요.
Sitemap 감지
robots.txt에서 참조하는 모든 Sitemap을 찾으세요.
오류 감지
잠재적 문제와 실수에 대한 경고를 받으세요.
Robots.txt Questions
robots.txt 테스트에 대한 자주 묻는 질문