الأدوات / أدوات SEO / مولّد robots.txt

مولّد robots.txt

اضبط القواعد اللي تحتاجها، وحمّل ملف robots.txt جاهز لرفعه على جذر موقعك مباشرة.

رابط خريطة الموقع (Sitemap)

مسارات ممنوعة من الفهرسة (سطر لكل مسار)

مثال: /wp-admin/ أو /checkout — سطر واحد لكل مسار

مسارات مسموحة صراحة (اختياري)

محركات بحث تريد استثناءها بالكامل

GPTBot OpenAI

CCBot Common Crawl

AhrefsBot Ahrefs SEO

SemrushBot Semrush SEO

الملف الجاهز