مولد ملف Robots.txt
أنشئ ملف robots.txt قياسياً لتنظيم زحف محركات البحث وفهرسة صفحات موقعك.
- التصنيف
- تحسين محركات البحث
- لغة الصفحة
- العربية
- واجهة الأداة
- الإنجليزية
الخصوصية: تجري صياغة وتوليد ملف robots.txt محلياً داخل متصفحك دون إرسال روابط أو مسارات موقعك إلى أي خادم خارجي.
واجهة الأداة بالإنجليزية
الأزرار والحقول داخل المساحة أدناه بالإنجليزية حتى تُترجم الواجهة. الشرح والخطوات والأسئلة حولها بالعربية، ويمكنك الكتابة بالعربية مباشرة في حقول النص.
Open the English pageInputs
This drafts text only. It never fetches your site or notifies search engines.
Result
Robots.txt drafted.
يساعد مولد ملف robots.txt مديري المواقع ومتخصصي السيو على صياغة ملف توجيهات الزحف المعياري الذي تقرأه عناكب محركات البحث مثل Googlebot وBingbot قبل استكشاف الموقع. يتيح النظام تحديد توجيهات السماح (Allow) والحظر (Disallow) لمختلف الزواحف أو لبوتات محددة، وحجب المجلدات الحساسة كلوحات الإدارة والملفات المؤقتة، مع إدراج رابط خريطة الموقع XML الرسمية. يساعد ضبط الملف في توجيه ميزانية الزحف نحو الصفحات الهامة وتفادي فهرسة المحتوى المكرر، مع توليد نصوص نقية صالحة للنسخ أو التنزيل المباشر دون حاجة لأي اتصال خارجي.
كيف تستخدم مولد ملف Robots.txt
- حدد وكلاء المستخدم (User-agents) المراد توجيههم مثل كافة البوتات (*) أو زواحف محددة.
- أضف مسارات المجلدات والصفحات المطلوب حظرها أو السماح بزحفها.
- أدخل رابط خريطة الموقع XML وانسخ الشفرة الناتجة أو نزّلها كملف robots.txt.
ما تحصل عليه
- ملف نصي معياري بصيغة robots.txt جاهز للرفع المباشر إلى جذر موقعك.
- توجيهات واضحة تضبط مسارات السماح والحظر لكل محرك بحث بصورة مستقلة.
- إدراج سليم لوسم خريطة الموقع Sitemap لتسهيل مهام الزحف والفهرسة.
متى تستخدم مولد ملف Robots.txt
- منع محركات البحث من أرشفة لوحات التحكم وصفحات الدخول والملفات الإدارية الخاصة.
- إرشاد عناكب البحث إلى رابط خريطة الموقع XML لتسريع اكتشاف الصفحات والمقالات الجديدة.
- حظر زواحف جمع البيانات وأدوات الذكاء الاصطناعي غير المرغوب فيها من استنزاف موارد الخادم.
أسئلة شائعة عن مولد ملف Robots.txt
أين يجب وضع ملف robots.txt في الموقع؟
يجب رفعه في المجلد الرئيسي (Root Directory) للموقع بحيث يمكن الوصول إليه مباشرة عبر الرابط yourdomain.com/robots.txt.
هل يمنع ملف robots.txt وصول المخترقين إلى الملفات المحظورة؟
لا، الملف موجه لمحركات البحث الملتزمة بالأعراف القياسية، ولا يوفر حماية أمنية ضد المتطفلين؛ لذا يجب تأمين المسارات الحساسة بكلمات مرور وتصاريح خادم.
كيف أحظر زاحفاً محدداً مثل روبوتات جمع البيانات؟
أدخل اسم وكيل المستخدم الخاص بالروبوت في سطر User-agent متبوعاً بتوجيه Disallow: / لحظر وصوله لكامل الموقع.
هل تُرسل بيانات ومسارات موقعي إلى أي خادم خارجي؟
لا، تُصاغ الشفرة محلياً داخل متصفحك دون إجراء أي فحص خارجي أو حفظ لمسارات موقعك عبر الإنترنت.
أدوات عربية ذات صلة
- مدقق تنازع الكلمات المفتاحية
اكتشف طلبات البحث التي تتنافس عليها صفحتان من تصدير Search Console.
- مولد وسم canonical
أنشئ وسم canonical مهربًا من رابط مطلق.
- مولد وسوم hreflang
أنشئ وسوم hreflang للصفحات متعددة اللغات مع تذكير بالروابط المتبادلة.
- مدقق كثافة الكلمات المفتاحية
احسب تكرار الكلمات وكثافتها بقواعد تقسيم معلنة.
⚡تضمين أداة مولد ملف Robots.txt في موقعك مع الشارة (Embed & Badge)↓
انسخ كود التضمين أو الشارة لإضافة الأداة إلى موقعك أو مدونتك أو ملفات README مع شارة اعتماد خفيفة وسريعة.
<iframe src="https://salaq.com/embed/seo/robots-txt-generator" title="مولد ملف Robots.txt — Tools Hub" width="100%" height="640" style="border:0;border-radius:12px;overflow:hidden;max-width:100%;" loading="lazy"></iframe>
<p style="font-size:12px;color:#6b7280;margin-top:6px;font-family:system-ui,-apple-system,sans-serif;">مشغل بواسطة <a href="https://salaq.com/ar/tools/seo/robots-txt-generator" target="_blank" rel="noopener" style="color:#2563eb;text-decoration:underline;">أداة مولد ملف Robots.txt من Tools Hub</a></p>