Robots.txt Tester
robots.txt 파일을 검증하고 테스트하세요. 구문 오류를 확인하고 지시문을 분석하며, 어떤 URL이 크롤러에 대해 차단 또는 허용되는지 확인할 수 있습니다.
robots.txt 파일을 가져와 테스트할 웹사이트 URL을 입력하세요
내 Robots.txt
robots.txt 파일은 검색 엔진이 웹사이트를 크롤링하는 방식을 제어합니다. 이 도구는 구문을 검증하고 오류를 식별하며 지시문이 의도대로 작동하는지 확인하도록 도와줍니다.
어떤 URL에서든 robots.txt를 가져오거나 직접 내용을 붙여넣어 검증하세요. user-agent, allow/disallow 규칙, Sitemap에 대한 상세 분석을 받을 수 있습니다.
구문 검증
robots.txt의 구문 오류와 잘못된 지시문을 확인하세요.
지시문 분석
모든 user-agent, allow/disallow 규칙, crawl delay를 확인하세요.
Sitemap 감지
robots.txt에서 참조하는 모든 Sitemap을 식별하세요.
영구 무료
가입이 필요 없습니다. 누구나 사용할 수 있는 무료 SEO 도구 모음의 일부입니다.
작동 방식
몇 초 만에 robots.txt를 테스트하세요
URL 입력
robots.txt 파일을 가져올 웹사이트 URL을 입력하세요.
파일 분석
이 도구가 robots.txt의 모든 지시문을 파싱하고 검증합니다.
결과 확인
오류, 경고, user-agent, 규칙, Sitemap을 확인하세요.
강력한 기능
종합적인 robots.txt 테스트
구문 검증
잘못된 구문과 형식 오류를 식별하세요.
User-Agent 분석
모든 user-agent와 해당 규칙을 확인하세요.
Disallow 규칙
각 user-agent별로 차단된 모든 경로를 확인하세요.
Allow 규칙
명시적으로 허용된 경로와 재정의 규칙을 확인하세요.
Sitemap 감지
robots.txt에서 참조하는 모든 Sitemap을 찾으세요.
오류 감지
잠재적 문제와 실수에 대한 경고를 받으세요.
Frequently Asked Questions
robots.txt 테스트에 대한 자주 묻는 질문