🤖 Генератор robots.txt

Создайте robots.txt для управления индексацией сайта

URL сайта

Sitemap URL

Запретить индексацию

/admin/ /api/ /tmp/ /search

Другие пути (по одному на строку):

Crawl-delay (сек)