Генератор robots.txt
Создание robots.txt с правилами allow/disallow и ссылками на sitemap.
Используйте * для всех роботов или укажите конкретных ботов, например Googlebot.
Запрещенные пути (Disallow)
Разрешенные пути (Allow)
Явные правила Allow не добавлены.
Используйте * для всех роботов или укажите конкретных ботов, например Googlebot.
Запрещенные пути (Disallow)
Заблокированные маршруты не добавлены.
Разрешенные пути (Allow)
Встроенные карты сайта (Sitemaps)
Сгенерированный robots.txt