robots.txtディレクティブ

このツールでできること

• robots.txtディレクティブでは、User-agent、Disallow、Allow、Sitemap、Crawl-delay、Host、# コメントの robots.txt ディレクティブを固定表で示します。
• 関連する観点として robots.txtディレクティブ、robots directives、robots txt directives を確認し、結果をコピーして別の作業に使えます。

使い方

1. 表の item 列で robots.txt に書くディレクティブ名を確認します。
2. content 列で「対象bot」「禁止」「許可」などの短い意味を見ます。
3. 実際の robots.txt では、対象クローラーごとに必要な行を組み立てます。
4. 詳細な書き方が必要な場合は seo-robots-txt-guide と合わせて確認します。

入力例・出力例

よくある利用シーン

• robots.txt を書く前にディレクティブ名を思い出す
• Allow と Disallow の役割を簡単に確認する
• クロール制御の説明資料に短い対応表を使う

結果確認のポイント

• 文字数、読みやすさ、重複、リンク先、検索意図との一致を確認してください。
• robots.txtディレクティブ、robots directives、robots txt directivesの観点で、入力内容と出力内容がずれていないか見直してください。
• コピーした結果を利用先に貼り付けたあと、改行や記号が変わっていないかも確認してください。

注意点

• 検索順位や開封率を保証するものではありません。実際の成果はコンテンツ品質や配信条件にも左右されます。
• 結果を公開・送信する前に、用途に合う形式かを必ず確認してください。

データの扱い / プライバシー

• robots.txtディレクティブの主要な処理はブラウザ内で実行されます。
• 入力内容を保存するアカウント機能はなく、ページを閉じると作業内容は手元のブラウザから離れます。
• 本番の秘密情報や個人情報を扱う場合は、入力前に必要性を確認してください。

よくある質問

関連ツール