Генератор robots.txt
Побудуйте коректний robots.txt із правилами allow/disallow, crawl-delay і директивами sitemap за допомогою зручних пресетів. Безкоштовно й працює у вашому браузері.
Створіть чистий robots.txt просто у вашому браузері. Нічого не завантажується — усе генерується локально.
Конструктор
Швидкі пресети
Групи user-agent
Карти сайту
robots.txt
Розмістіть цей файл у корені сайту, щоб він був доступний за адресою https://your-site.com/robots.txt
Потрібна допомога?
Виникла проблема з цим інструментом? Повідомте нас.