مجاني · لا تسجيل · نتائج فورية

Robots.txt مجاني مولد والتحقق

أنشئ ملف robots.txt منسق بشكل مثالي في ثوانٍ باستخدام المنشئ المرئي الخاص بنا - أو تحقق من ملفك الحالي بحثًا عن الأخطاء التي قد تمنع Google من موقعك بصمت.

Build Your Robots.txt

Quick Start Template

Your Site URL

Used to auto-fill the Sitemap URL.

Sitemap URL (optional)

Include

Crawler Rules

Live Preview

robots.txt

# Loading preview…

0 lines

0 bytes

الأساسيات

ما هو ملف Robots.txt؟

العلامة ملف robots.txt هو ملف نصي عادي يوضع في جذر موقعك (مثل https://yoursite.com/robots.txt) يوجه روبوتات محركات البحث – مثل Googlebot – أي صفحات أو أقسام من موقعك يجب أو لا يجب زحفها وفهرستها.

على الرغم من أن ملف robots.txt لا يضمن الخصوصية (لا تزال الصفحات المحظورة يمكن أن تظهر في نتائج البحث إذا تم الارتباط بها من مواقع أخرى)، إلا أنه الأداة الأساسية لإدارة ميزانية الزحف — مقدار ما يستكشفه Google من موقعك يوميًا. عند استخدامه بشكل صحيح، يساعد Google في تركيز زحفه على الصفحات المهمة فعليًا لترتيبك.

بالنسبة لمواقع WordPress على وجه الخصوص، يمنع ملف robots.txt المكون بشكل جيد Googlebot من إضاعة الوقت على صفحات الإدارة وشاشات تسجيل الدخول ونتائج البحث الداخلية – مما يوجه ميزانية الزحف هذه نحو المحتوى الخاص بك بدلاً من ذلك.

مثال robots.txt

# Allow all crawlers, block admin
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Block bad bots entirely
User-agent: AhrefsBot
Disallow: /

# Sitemap location
Sitemap: https://yoursite.com/sitemap.xml

دليل WordPress

كيفية إنشاء ملف Robots.txt لـ WordPress

لا ينشئ WordPress ملف robots.txt افتراضيًا. إليك بالضبط ما يجب إضافته لتحسين SEO الأمثل.

استخدم المولد أعلاه

حدد قالب "WordPress" أعلاه، وأدخل عنوان URL لموقعك، وسيتم إنشاء ملف robots.txt الخاص بك فورًا مع جميع القواعد الصحيحة المعبأة مسبقًا.

الرفع عبر FTP أو cPanel

قم بتنزيل ملف robots.txt الذي تم إنشاؤه وارفعه إلى الدليل الجذر لموقعك باستخدام FTP أو مدير ملفات cPanel أو مدير ملفات مضيفك.

Or Use SkySEOManager

SkySEOManager has a built-in robots.txt editor and validator under its Tools section. Paste your generated content there directly.

💡

نصيحة احترافية: التحقق من الصحة بعد كل تغيير

بعد تحميل أو تحرير ملف robots.txt الخاص بك، قم دائمًا بتشغيله من خلال المدقق أعلاه للتحقق من الأخطاء. خطأ إملائي واحد – مثل Disallow: / — يمكن أن يحظر موقعك بالكامل من Google بين ليلة وضحاها.

تجنب هذه الأخطاء

أخطاء Robots.txt الشائعة التي تضر بتحسين محركات البحث لديك

هذه هي الأخطاء الأكثر شيوعًا التي يكتشفها المدقق الخاص بنا – والأكثر احتمالًا لتدمير ترتيبك في Google بهدوء.

🔴

Disallow: / (يحظر كل شيء)

العلامة Disallow: / تحت User-agent: * يحظر Googlebot من موقعك بالكامل. هذا هو الخطأ الأكثر كارثية في robots.txt – ويحدث أكثر مما تعتقد أثناء بناء المواقع.

🟡

حظر ملفات CSS و JavaScript

منع /wp-content/ يمنع Google من تحميل أوراق الأنماط والنصوص البرمجية الخاصة بك. يقوم Google بعرض الصفحات مثل المتصفح – إذا لم يتمكن من تحميل CSS/JS، فلن يتمكن من تقييم المحتوى الخاص بك بشكل صحيح للترتيب.

🟡

توجيه خريطة الموقع المفقود

عدم تضمين Sitemap: يعني توجيه أنه يجب على Google اكتشاف خريطة موقعك من خلال إرسال Search Console فقط. إضافته إلى robots.txt هو فوز سهل يساعد Googlebot في العثور على جميع صفحاتك بشكل أسرع.

ℹ️

أخطاء المسار الحساسة لحالة الأحرف

مسارات Robots.txt حساسة لحالة الأحرف على خوادم Linux. Disallow: /Admin/ لا يحظر /admin/. استخدم دائمًا الحالة المطابقة لمسارات URL الفعلية الخاصة بك.

إصلاح تحسين محركات البحث لموقعك بالكامل

ملف robots.txt الخاص بك هو مجرد البداية.
قم بإصلاح تحسين محركات البحث لكل صفحة باستخدام SkySEOManager Pro.

بمجرد أن يسمح ملف robots.txt الخاص بك لـ Google بزحف موقعك، تأكد من تحسين كل صفحة. يقوم SkySEOManager Pro بإنشاء العناوين والأوصاف التعريفية ونص بديل الصورة بشكل مجمع عبر موقع WordPress بالكامل – مدعومًا بـ Gemini AI.

Download SkySEOManager Free → تشغيل تدقيق SEO كامل ←

الأسئلة الشائعة

هل ملف robots.txt مطلوب لتحسين محركات البحث؟

لا، ملف robots.txt ليس مطلوبًا. إذا لم يعثر Google على robots.txt في جذر نطاقك، فإنه يعامل ذلك على أنه "السماح بكل شيء" ويزحف إلى موقعك بالكامل بحرية. ومع ذلك، يوصى بشدة بإنشاء واحد لمعظم المواقع حتى تتمكن من حظر صفحات الإدارة وصفحات تسجيل الدخول والمحتوى المكرر من الزحف.

هل سيمنع robots.txt ظهور صفحاتي في Google؟

حظر عنوان URL في robots.txt يمنع Googlebot من الزحف فهرستها، ولكنه لا يضمن أنها لن تظهر في نتائج البحث. إذا كانت المواقع الأخرى ترتبط بعنوان URL محظور، فقد يظل Google يعرضه في النتائج مع وصف "لا توجد معلومات متاحة". لمنع صفحة من الظهور في Google تمامًا، استخدم علامة noindex الوصفية بدلاً من ذلك.

هل يتبع Google توجيه Crawl-delay؟

لا — يتجاهل Google صراحة توجيه Crawl-delay. يستخدم إشاراته الداخلية الخاصة لإدارة معدل الزحف لخادمك. يتم احترام Crawl-delay بواسطة بعض البوتات الأخرى مثل Bingbot و Yandex، لكن ليس له تأثير على Googlebot.

كم مرة يعيد Google قراءة ملف robots.txt الخاص بي؟

عادةً ما يخزن Google مؤقتًا ويعيد قراءة ملفات robots.txt كل 24 ساعة. إذا قمت بإجراء تغيير تحتاج إلى أن يلتقطه Google بسرعة (مثل إزالة قاعدة noindex أو Disallow)، يمكنك طلب إعادة الزحف بشكل أسرع عبر Google Search Console ← الإعدادات ← إحصائيات الزحف.

هل يجب علي حظر دليل /wp-admin/ الخاص بي؟

نعم. إضافة Disallow: /wp-admin/ يمنع الزواحف من إهدار ميزانية الزحف الخاصة بك على صفحات الإدارة التي ليس لها قيمة SEO. ومع ذلك، تأكد من إضافة Allow: /wp-admin/admin-ajax.php في السطر التالي للحفاظ على عمل الميزات المعتمدة على AJAX (مثل تحديثات سلة WooCommerce) بشكل صحيح.