クローラーを選ぶ
*またはGooglebotなどの名前を入力します。
無料ROBOTS.TXT生成ツール
無料robots.txt生成ツール
検索クローラーの巡回範囲を伝える標準ファイルをブラウザで作成します。
ルールとURLは送信・保存されません。
- 1ルール入力
- 2内容確認
- 3ファイル公開
1 · ルール入力
クロールルールを作成
クローラーごとに許可・拒否するパスを設定します。
2 · 内容確認
robots.txtプレビュー
ルールを入力するとここに表示されます。
UTF-8テキストをサイト直下の/robots.txtに公開してください。
無料ROBOTS.TXTガイド
3ステップでルールを準備
登録・インストールなしで無料作成できます。パスを設定
AllowとDisallowを追加し、生成結果を確認します。
ルートに公開
ファイルをサイトの/robots.txtに配置します。
クロール制御
公開前に知っておくこと
クロール、インデックス、セキュリティは別の機能です。
グループ別ルール
対象のUser-agent配下にルールを置きます。
具体的な一致
通常は最も具体的に一致するパスが適用されます。
秘密を隠さない
robots.txtは公開ファイルで、非公開データを保護しません。
無料ROBOTS.TXT生成ツール FAQ
robots.txt生成のよくある質問
無料利用、配置場所、役割を確認できます。1無料で使えますか？
はい。登録や回数制限なしで無料利用でき、ブラウザ内だけで処理します。
2robots.txtはどこに置きますか？
https://example.com/robots.txtのようにホスト直下へ配置します。
3Disallowで検索結果から消えますか？
いいえ。クロールを制限するだけで、検索除外やプライバシーを保証しません。
4サイトマップを追加できますか？
はい。完全なhttpまたはhttps URLを複数追加できます。