مولّد robots.txt

جميع الأدوات

أنشئ ملف robots.txt صحيحًا مع قواعد السماح/المنع وcrawl-delay وتوجيهات sitemap باستخدام إعدادات مسبقة عملية. مجاني ويعمل داخل متصفحك.

أنشئ ملف robots.txt نظيفًا مباشرة في متصفحك. لا يُرفع شيء — يتم توليد كل شيء محليًا.

المُنشئ
إعدادات مسبقة سريعة
مجموعات User-agent
خرائط المواقع
robots.txt 

						

						

							ضع هذا الملف في جذر موقعك ليكون قابلاً للوصول على https://your-site.com/robots.txt
						

					

				

			

		

	


        
                    

		


					
حول مولّد robots.txt

							
يبني مولّد robots.txt هذا ملف robots.txt سليم الصياغة من مجموعات وكلاء المستخدم، لكل منها مسارات Allow وDisallow الخاصة بها وتأخير زحف (Crawl-delay) اختياري. أضف بقدر ما تحتاج من مجموعات — مجموعة عامة * لكل الزواحف إضافة إلى قواعد محددة لبوتات معينة — وأدرج توجيه Sitemap واحداً أو أكثر في النهاية.

							
تغطي الإعدادات المسبقة السريعة نقاط البداية الشائعة: السماح بكل شيء، حظر كل شيء، إعداد WordPress منطقي، وقائمة حظر لبوتات شائعة. ابدأ من إعداد مسبق ثم عدّل المسارات لتطابق بنية موقعك.

							
يُولَّد الملف محلياً في متصفحك ولا يُرفَع أبداً. انسخ المخرجات أو نزّل robots.txt، ثم ضعه في جذر موقعك حتى تجده الزواحف على https://your-site.com/robots.txt — هذا الموقع بالتحديد هو الوحيد الذي تتحقق منه محركات البحث.

					
					
كيفية استخدام مولّد robots.txt

			
    
									
  1. ابدأ اختيارياً من إعداد مسبق: السماح بالكل، الحظر الكامل، WordPress، أو حظر البوتات الشائعة.
    2. 
									
  2. عدّل وكيل المستخدم لكل مجموعة (مثل * أو Googlebot) وأضف مسارات Disallow وAllow.
    3. 
									
  3. اضبط تأخير زحف اختيارياً بالثواني وأضف مجموعات أخرى لزواحف أخرى إن لزم.
    4. 
									
  4. أضف روابط خرائط موقعك حتى تكتشفها الزواحف.
    5. 
									
  5. انسخ النتيجة أو نزّل robots.txt، وارفعه إلى جذر موقعك.
    6. 
							

		
					
الأسئلة الشائعة

			

									

						

							
						

						

							
في جذر المضيف، مثل https://example.com/robots.txt. الزواحف تطلب هذا المسار فقط — ملف robots.txt في مجلد فرعي يُتجاهَل.

						

					

									

						

							
						

						

							
يمنع Disallow زحف المسارات المطابقة لمجموعة وكيل المستخدم تلك؛ ويعيد Allow السماح بمسار فرعي داخل منطقة ممنوعة، مثل السماح بـ /admin/help/ تحت /admin/ الممنوع.

						

					

									

						

							
						

						

							
ليس بشكل موثوق. إنه يوقف الزحف، لكن الروابط المعروفة مسبقاً قد تظهر دون مقتطف. لإبقاء صفحة خارج الفهرس، استخدم وسم robots الوصفي noindex واسمح بزحفها.

						

					

									

						

							
						

						

							
لا. بعض الزواحف تحترمه، لكن Googlebot يتجاهل هذا التوجيه — تُدار وتيرة زحف Google عبر Search Console بدلاً من ذلك. يبقى مفيداً لبوتات أخرى.

						

					

									

						

							
						

						

							
إنه مجاني، ويُبنى الملف بالكامل في متصفحك — القواعد التي تدخلها لا تُرسَل أبداً إلى خادم.

						

					

							


						
			


	



	
	

		

		

			شارك هذا
							
					
				
							
					
				
							
					
				
							
					
				
							
					
				
							
					
				
							
					
				
							
					
				
							
					
				
					

	



    
	
	

				
أدوات ذات صلة


					

									

						
							
							
								
									مولّد خرائط مواقع XML
									
								
								حوّل قائمة من عناوين URL إلى خريطة موقع XML صحيحة مع lastmod وchangefreq وpriority، جاهزة للإرسال إلى محركات البحث. مجاني، داخل متصفحك.
								
																			مجاني
																	
							
						
					

									

						
							
							
								
									مولّد وسوم Meta
									
								
								أنشئ مجموعة كاملة من وسوم HTML الخاصة بتحسين محركات البحث — العنوان والوصف وrobots وcanonical وviewport والمزيد — مع معاينة Google مباشرة. مجاني، داخل متصفحك.
								
																			مجاني
																	
							
						
					

									

						
							
							
								
									مولّد .htaccess
									
								
								جمّع قواعد .htaccess الشائعة في Apache — عمليات إعادة توجيه HTTPS وwww والتخزين المؤقت والضغط ورؤوس الأمان والمزيد — بنقرة واحدة. مجاني، داخل متصفحك.
								
																			مجاني
																	
							
						
					

									

						
							
							
								
									رموز حالة HTTP
									
								
								ابحث عن كل رمز حالة استجابة HTTP (1xx–5xx) في دليل قابل للبحث والتصفية — ثم افتح أي رمز لمعرفة معناه ومتى تستخدمه وما إذا كان قابلاً للتخزين المؤقت والـ RFC الذي يعرّفه. في متصفحك، مجاناً.
								
																			مجاني
																	
							
						
					

									

						
							
							
								
									طرق HTTP
									
								
								مرجع سريع لكل طريقة طلب HTTP — GET وPOST وPUT وPATCH وDELETE والبقية، بالإضافة إلى WebDAV — يوضّح في لمحة ما إذا كانت كل منها آمنة ومتكافئة وقابلة للتخزين المؤقت، وما إذا كانت تأخذ جسماً، ومثالاً نموذجياً. في متصفحك، مجاناً.
								
																			مجاني
																	
							
						
					

									

						
							
							
								
									مرجع ترويسات HTTP
									
								
								ابحث عن ترويسات طلب واستجابة HTTP الشائعة في دليل قابل للبحث — صفِّ حسب الاتجاه والفئة، اقرأ وصفاً من سطر واحد ومثالاً واقعياً، وانسخ أي اسم ترويسة بنقرة واحدة. في متصفحك، مجاناً.
								
																			مجاني
																	
							
						
					

							

			







		

			

				

					
					

						
هل تحتاج إلى مساعدة؟

						
هل واجهت مشكلة في هذه الأداة؟ أخبر فريقنا.

					

				

				
					الإبلاغ عن مشكلة
				
			

		

	





        

            

                

                    
                

                

                    

                        
أضف هذه الأداة المجانية إلى موقعك الخاص — انسخ والصق الكود أدناه.