メインコンテンツへスキップ
kitlocal.dev

robots.txt生成

ローカルで実行

100% ブラウザ内で処理されます。入力や出力が端末の外に送信されることはありません。

許可/拒否ルールとサイトマップ参照を含むrobots.txtを生成します。

すべてのクローラーに一致させるには * を使用するか、Googlebot などのボットを指定します。
クロール拒否パス (Disallow)
クロール許可パス (Allow)
明示的な許可ルールはありません。
すべてのクローラーに一致させるには * を使用するか、Googlebot などのボットを指定します。
クロール拒否パス (Disallow)
拒否されたルートはありません。
クロール許可パス (Allow)
サイトマップURL
生成された robots.txt