قواعد غير مرتبة
ينظم Allow وDisallow في مجموعات User-agent واضحة.
أداة SEO مجانية
مولد robots.txt إنشاء قواعد زحف SEO
يساعد مولد robots.txt أصحاب المواقع وفرق SEO على تجهيز قواعد الزحف، روابط Sitemap، النسخ والتنزيل قبل إطلاق الموقع.
AD
مشكلات يحلها مولد robots.txt
خطأ صغير في robots.txt قد يمنع صفحات مهمة أو يجعل اكتشاف Sitemap غير واضح.
ميزات مولد robots.txt
استخدم مولد robots.txt كقائمة فحص SEO قبل النشر.
مجموعات User-agent
أنشئ قواعد لـ * أو Googlebot أو Bingbot أو زاحف مخصص.
Allow وDisallow وSitemap
أضف المسارات وSitemap وCrawl-delay عند الحاجة.
نسخ وتنزيل
انسخ الناتج أو نزّله باسم robots.txt.
كيفية استخدام مولد robots.txt
اختر قالبًا، راجع المسارات، ثم صدّر الملف.
01
02
03
سير عمل مولد robots.txt
جهّز المواقع الجديدة، احمِ المسارات الخاصة، ورتّب أساسيات SEO.
إنشاء القواعد بصريًا
حوّل الحقول إلى أسطر User-agent وAllow وDisallow وCrawl-delay وSitemap.
استخدامات مولد robots.txt
مناسب لـ SEO والتطوير والنشر.
أصحاب المواقع
إنشاء robots.txt بسيط دون كتابة كل توجيه يدويًا.
فحص SEO
السماح للصفحات المهمة وحظر المسارات الخاصة.
ملاحظات SEO لمولد robots.txt
robots.txt يتحكم في الزحف ولا يضمن إزالة الفهرسة.
موقع الجذر
لـ https://example.com/ استخدم https://example.com/robots.txt.
Sitemap كامل
أضف البروتوكول والنطاق في أسطر Sitemap.
أسئلة مولد robots.txt
أسئلة عن القواعد وCrawl-delay وSitemap.
هل يزيل robots.txt الصفحات من البحث؟
لا. إنه يتحكم في الزحف؛ للتحكم في الفهرسة استخدم noindex أو الأدوات المناسبة.
هل يدعم Google حقل Crawl-delay؟
لا. يتجاهل Google حقل Crawl-delay.
ابدأ باستخدام مولد robots.txt
افتح الأداة، اختر قالبًا، وصدّر robots.txt.