מחולל robots.txt
בנו robots.txt תקין עם כללי allow/disallow, crawl-delay והנחיות sitemap בעזרת הגדרות נוחות. חינמי ורץ בדפדפן שלכם.
בנו robots.txt נקי ישירות בדפדפן שלכם. שום דבר לא מועלה — הכול נוצר מקומית.
בונה
הגדרות מהירות
קבוצות user-agent
Sitemaps
robots.txt
מקמו את הקובץ הזה בשורש האתר שלכם כך שיהיה נגיש בכתובת https://your-site.com/robots.txt
צריך עזרה?
נתקלת בבעיה בכלי הזה? ספר לצוות שלנו.