Генератор robots.txt

Визуальный конструктор robots.txt с пресетами для WordPress, Next.js, интернет-магазинов и блокировки AI-ботов.

Готовые пресеты

URL сайта

Путь к Sitemap

Allow (по одному на строку)

Disallow (по одному на строку)

Дополнительные директивы

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/

Sitemap: https://example.com/sitemap.xml

Привлекаете трафик? Не теряйте заявки

Правильный robots.txt — полдела. Собирайте все лиды с сайта в LeadHUB и получайте уведомления мгновенно. Попробовать бесплатно →

Частые вопросы