robots.txt作成ツール — AIクローラーをブロック
有効なrobots.txtを作成：クローラーの許可・拒否、非公開フォルダの除外、AIボットのブロック、サイトマップの指定ができます。
ツールの使い方
- サイト全体を許可するか拒否するかを選びます。
- 除外するパスを追加し、必要ならAIボットをブロックします。
- robots.txtをコピーまたはダウンロードします。
よくある質問 (FAQ)
robots.txtはどこに置きますか？
ドメインのルート（https://ドメイン/robots.txt）です。
robots.txtでGoogleから非表示にできますか？
完全にはできません。クロールを止めるだけなので、インデックスさせない場合はnoindexを使います。
関連ツール
Google SERP シミュレーター
タイトルやスニペットが検索結果で途切れないよう、デスクトップとモバイルの正確なピクセル幅を算出。
Schema JSON-LD ＆ AI標準規格
正規のJSON-LD構造化データを作成し、AIクローラー向けの標準robots.txtとllms.txtを生成。
100% ブラウザ内プライバシー処理
外部サーバーへのテキスト送信は一切なく、すべての解析と生成がお使いの端末上で完結。