robots.txt生成
許可/拒否ルールとサイトマップ参照を含むrobots.txtを生成します。
すべてのクローラーに一致させるには * を使用するか、Googlebot などのボットを指定します。
クロール拒否パス (Disallow)
クロール許可パス (Allow)
明示的な許可ルールはありません。
すべてのクローラーに一致させるには * を使用するか、Googlebot などのボットを指定します。
クロール拒否パス (Disallow)
拒否されたルートはありません。
クロール許可パス (Allow)
サイトマップURL
生成された robots.txt