Генератор на robots.txt
Изградете коректен robots.txt с правила allow/disallow, crawl-delay и директиви sitemap чрез удобни предварителни настройки. Безплатно и работи във вашия браузър.
Изградете чист robots.txt направо във вашия браузър. Нищо не се качва — всичко се генерира локално.
Конструктор
Бързи предварителни настройки
Групи user-agent
Карти на сайта
robots.txt
Поставете този файл в корена на сайта си, за да е достъпен на https://your-site.com/robots.txt
Нуждаете се от помощ?
Открихте проблем с този инструмент? Кажете ни.