مجاني · لا يوجد تسجيل · نتائج فورية

ملف Robots.txt المجاني مولد ومدقق

أنشئ ملف robots.txt منسق بشكل مثالي في ثوانٍ باستخدام أداة الإنشاء المرئي لدينا - أو تحقق من صحة الملف الحالي بحثًا عن الأخطاء التي قد تمنع Google من الوصول إلى موقعك بصمت.

Build Your Robots.txt

Quick Start Template

Your Site URL

Used to auto-fill the Sitemap URL.

Sitemap URL (optional)

Include

Crawler Rules

Live Preview

robots.txt

# Loading preview…

0 lines

0 bytes

الأساسيات

ما هو ملف Robots.txt؟

أ ملف robots.txt هو ملف نصي عادي يتم وضعه في جذر موقع الويب الخاص بك (على سبيل المثال. https://yoursite.com/robots.txt). فهو يرشد برامج زحف محركات البحث - مثل Googlebot - إلى الصفحات أو الأقسام في موقعك التي ينبغي أو لا ينبغي لها الزحف إليها وفهرستها.

على الرغم من أن ملف robots.txt لا يضمن الخصوصية (يمكن أن تظهر الصفحات المحظورة في نتائج البحث إذا تم ربطها من مواقع أخرى)، إلا أنها الأداة الأساسية لإدارة ميزانية الزحف — مقدار ما يستكشفه Google من موقعك يوميًا. إذا تم استخدامه بشكل صحيح، فإنه يساعد Google على تركيز زحفه على الصفحات التي تهم بالفعل تصنيفاتك.

بالنسبة لمواقع WordPress على وجه التحديد، يمنع ملف robots.txt الذي تمت تهيئته بشكل جيد Googlebot من إضاعة الوقت على صفحات الإدارة وشاشات تسجيل الدخول ونتائج البحث الداخلية، مما يؤدي إلى توجيه ميزانية الزحف نحو المحتوى الخاص بك بدلاً من ذلك.

مثال ملف robots.txt

# Allow all crawlers, block admin
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Block bad bots entirely
User-agent: AhrefsBot
Disallow: /

# Sitemap location
Sitemap: https://yoursite.com/sitemap.xml

دليل ووردبريس

كيفية إنشاء ملف Robots.txt لـ WordPress

لا يقوم WordPress بإنشاء ملف robots.txt افتراضيًا. إليك بالضبط ما يجب إضافته لتحسين محركات البحث (SEO) الأمثل.

استخدم المولد أعلاه

حدد قالب "WordPress" أعلاه، وأدخل عنوان URL لموقعك، وسيتم إنشاء ملف robots.txt الخاص بك على الفور مع ملء جميع القواعد الصحيحة مسبقًا.

التحميل عبر FTP أو cPanel

قم بتنزيل ملف robots.txt الذي تم إنشاؤه وقم بتحميله إلى الدليل الجذر لموقعك باستخدام FTP أو cPanel File Manager أو مدير الملفات الخاص بمضيفك.

أو استخدم Yoast/Rank Math

يحتوي كل من Yoast SEO وRank Math على محرر robots.txt مدمج ضمن SEO → Tools → File Editor. الصق المحتوى الذي تم إنشاؤه هناك مباشرة.

💡

نصيحة احترافية: التحقق من صحة البيانات بعد كل تغيير

بعد تحميل ملف robots.txt أو تعديله، قم دائمًا بتشغيله من خلال أداة التحقق أعلاه للتحقق من الأخطاء. خطأ مطبعي واحد - مثل Disallow: / - يمكنه حظر موقعك بالكامل من Google بين عشية وضحاها.

تجنب هذه الأخطاء

الأخطاء الشائعة في ملف Robots.txt التي تضر بتحسين محركات البحث لديك

هذه هي الأخطاء الأكثر شيوعًا التي تكتشفها أداة التحقق لدينا - والأخطاء التي من المرجح أن تؤدي إلى إنهاء تصنيفات Google الخاصة بك بهدوء.

🔴

عدم السماح: / (حظر كل شيء)

أ Disallow: / تحت User-agent: * حظر Googlebot من موقعك بالكامل. هذا هو خطأ ملف robots.txt الأكثر كارثية — ويحدث في كثير من الأحيان أكثر مما كنت تعتقد أثناء إنشاء الموقع.

🟡

حظر ملفات CSS وجافا سكريبت

عدم السماح /wp-content/ يمنع Google من تحميل أوراق الأنماط والبرامج النصية الخاصة بك. يعرض Google الصفحات مثل المتصفح - إذا لم يتمكن من تحميل CSS/JS، فلن يتمكن من تقييم المحتوى الخاص بك بشكل صحيح من أجل التصنيف.

🟡

توجيه خريطة الموقع مفقود

لا يشمل أ Sitemap: التوجيه يعني أنه يتعين على Google اكتشاف خريطة الموقع الخاصة بك من خلال إرسال Search Console فقط. وتعد إضافته إلى ملف robots.txt بمثابة فوز سهل يساعد Googlebot في العثور على جميع صفحاتك بشكل أسرع.

ℹ️

أخطاء المسار الحساسة لحالة الأحرف

تعد مسارات Robots.txt حساسة لحالة الأحرف على خوادم Linux. Disallow: /Admin/ لا يمنع /admin/. استخدم دائمًا الحالة الدقيقة لمسارات URL الفعلية.

إصلاح SEO لموقعك بالكامل

إن ملف robots.txt الخاص بك هو مجرد البداية.
أصلح تحسين محركات البحث لكل صفحة باستخدام SkySEOManager Pro.

بمجرد أن يسمح ملف robots.txt لـ Google بالزحف إلى موقعك، تأكد من تحسين كل صفحة. يقوم SkySEOManager Pro بإنشاء العناوين والأوصاف التعريفية والنص البديل للصور بشكل مجمّع عبر موقع WordPress بأكمله - المدعوم من Gemini AI.

اكتشف SkySEOManager Pro → قم بإجراء تدقيق كامل لكبار المسئولين الاقتصاديين →

الأسئلة المتداولة

هل ملف robots.txt مطلوب لتحسين محركات البحث؟

لا، ملف robots.txt غير مطلوب. إذا لم يعثر Google على ملف robots.txt في جذر نطاقك، فإنه يعامل ذلك على أنه "السماح بكل شيء" ويزحف إلى موقعك بالكامل بحرية. ومع ذلك، يوصى بشدة بإنشاء واحدة لمعظم المواقع حتى تتمكن بشكل صريح من منع الزحف إلى صفحات الإدارة وصفحات تسجيل الدخول والمحتوى المكرر.

هل سيمنع ملف robots.txt صفحاتي من الظهور في Google؟

يؤدي حظر عنوان URL في ملف robots.txt إلى منع Googlebot من ذلك الزحف ذلك، ولكن لا يضمن أنه لن يحدث يظهر في نتائج البحث. إذا كانت المواقع الأخرى ترتبط بعنوان URL محظور، فقد يستمر Google في عرضه في النتائج التي تحتوي على وصف "لا توجد معلومات متاحة". لمنع ظهور صفحة ما في Google بشكل كامل، استخدم علامة noindex الوصفية بدلاً من ذلك.

هل تتبع Google توجيه تأخير الزحف؟

لا — يتجاهل Google بشكل صريح توجيه تأخير الزحف. ويستخدم إشاراته الداخلية لإدارة معدل الزحف لخادمك. يتم احترام تأخير الزحف من قبل بعض برامج الروبوت الأخرى مثل Bingbot وYandex، ولكن ليس له أي تأثير على Googlebot.

كم مرة يعيد Google قراءة ملف robots.txt الخاص بي؟

يقوم Google عادةً بتخزين ملفات robots.txt مؤقتًا وإعادة قراءتها كل 24 ساعة. إذا قمت بإجراء تغيير تريد من Google التقاطه بسرعة (مثل إزالة قاعدة noindex أو Disallow)، فيمكنك طلب إعادة الزحف بشكل أسرع عبر Google Search Console → الإعدادات → إحصائيات الزحف.

هل يجب أن أقوم بحظر دليل /wp-admin/ الخاص بي؟

نعم. إضافة Disallow: /wp-admin/ يمنع برامج الزحف من إهدار ميزانية الزحف الخاصة بك على صفحات الإدارة التي ليس لها قيمة لتحسين محركات البحث. ومع ذلك، تأكد من إضافة Allow: /wp-admin/admin-ajax.php في السطر التالي للحفاظ على عمل الميزات المعتمدة على AJAX (مثل تحديثات عربة WooCommerce) بشكل صحيح.