Robots.txt Tester
robots.txtファイルを検証・テストできます。構文エラー、ディレクティブ、クローラーに対してブロックまたは許可されるURLを確認できます。
WebサイトURLを入力してrobots.txtファイルを取得・テスト
robots.txtを 検証
robots.txtファイルは、検索エンジンがWebサイトをどのようにクロールするかを制御します。このツールは構文を検証し、エラーを特定し、ディレクティブが意図どおり機能しているか確認するのに役立ちます。
任意のURLからrobots.txtを取得するか、独自の内容を貼り付けて検証できます。user-agent、allow/disallowルール、sitemapsの詳細分析を取得できます。
構文検証
robots.txt内の構文エラーや無効なディレクティブを確認します。
ディレクティブ分析
すべてのuser-agent、allow/disallowルール、crawl delayを確認できます。
Sitemap検出
robots.txtで参照されているすべてのsitemapsを特定します。
ずっと無料
登録不要。誰でも使える無料SEOツールキットの一部です。
使い方
robots.txtを数秒でテスト
URLを入力
任意のWebサイトURLを入力してrobots.txtファイルを取得します。
ファイルを分析
ツールがrobots.txt内のすべてのディレクティブを解析・検証します。
結果を確認
エラー、警告、user-agent、ルール、sitemapsを確認できます。
便利な 機能
包括的なrobots.txtテスト
構文検証
無効な構文やフォーマットエラーを特定します。
User-Agent分析
すべてのuser-agentと個別ルールを確認できます。
Disallowルール
各user-agentでブロックされるすべてのパスを表示します。
Allowルール
明示的に許可されたパスと上書きルールを確認できます。
Sitemap検出
robots.txtで参照されているすべてのsitemapsを見つけます。
エラー検出
潜在的な問題やミスに関する警告を取得できます。
Frequently Asked Questions
robots.txtテストに関するよくある質問