شرح الطريقة الصحيحة لإنشاء ملف Robots.txt مخصص لمدونة بلوجر بالتفصيل، وإنشاء ملف روبوت Robots.txt لمدونة بلوجر لا تقل أهمة بدورها أيضا عن إضافة خريطة الموقع Sitemap ، إذا السؤال المطروح ما أهمية ملف روبوت Robots.txt ؟، لكن دعنا نقوم أولا بالتعريف بملف Robos.txt.
المحتويات
ماهو ملف روبوت Robots.txt ؟
ملف روبوت Robots.txt هو ملف به أوامل يقوم بتوجيه روبوتات محركات البحث وعلى رأسهم محرك البحث جوجل على وجه الخصوص.
أهمية ملف روبوت Robots.txt
يقوم هذا الملف بتوجيه عناكب البحث بالصفحات المهمة التي تريد أرشفتها وغير المهمة، مثلا على سبيل المثال، تسمح له بأرشفة مواضيع المدونة وصفحاتها المهمة، وتمنع أرشفة الصفحات الغير المهمة ك صفحة البحث وصفحة أقسام المدونة، لكي لا يتم أرشفة الموضوع الواحد أكثر من مرة، وتقع في التكرار وهذا الأمر لا تقبله محركات البحث، وقد تسبب لك مشاكل لمدونتك.
وهذه من أشهر الرسائل التي تظهر عندما تقوم بعمل أمر خاطئ في ملف Robots.txt : حل مشكلة تمت الفهرسة، ولكن يتم الحظر باستخدام Robots.txt
افضل طريقة لإنشاء ملف روبوت robots.txt مخصص
هذا مثال بسيط لملف روبوت وهذا ما نستعمله في مدونة نقرة نت :
User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /search Allow: / Sitemap: https://www.naqra.net/sitemap.xml
أفضل شرح لملف روبوت Robots.txt مخصص
يتكون الملف من 3 عناصر سنشرح كل عنصر على حدة :
شرح User-agent: Mediapartners-Google
من الإسم “ميديا بارتنر جوجل” سيتضح لك مفهوم هذا العنصر، وهو مخصص على وجه الخصوص لإعلانات جوجل أدسنس، عن طريق هذا الكود يتم فحص محتوى مدونتك وبالتالي يعطي إشارة لجوجل لتضع لك إعلانات تتناسب مع مدونتك.
شرح User-agent: *
هذا العنصر من الكود هو الذي يسمح أو لا من زحف محركات البحث لملفات معينة داخل مدونتك، فإذا كنت تريد أرشفة المدونة بأكلمها تقوم بوضع Allow: / مباشرة بعد هذا الأمر، أنظر ملف الروبوت Robots.txt السابق شرحه، أما إذا كنت تريد منع زحف، على سبيل المثال نحن نمنع الزحزف إلى صفحات البحث، قمنا بوضع هذا الأمر Disallow: /search وهكذا.
شرح ملف Sitemap
هو ملف يحتوي على محتوى مدونتك بالكامل فهو الملف الذي يتم الزحف إليه كل مرة محرك البحث، هذا الملف سبقنا وتطرقنا إليه في مقالة مفصلة تحت عنوان : إضافة خرائط Sitemap مدونة بلوجر لمشرفي المواقع يمكن قراءة هذا المقال فهو مهم جدا وعامل أساسي في أرشفة مدونة بلوجر وتحسين الـسيو SEO لمدونات لبلوجر.
إضافة ملف روبوت robots.txt مخصص لمدونات بلوجر
عند الدخول إلى لوحة التحكم بلوجر قم بالدخول الي الاعدادات >> إعدادات البحث >> ملف Robots.txt مخصص >> تعديل .
قم بإدخال كود Robots.txt بعد نسخه، وضعه في الصندوق المخصص لذلك، كما في الصورة، لا تنسى أن تقم بتبديل الرابط برابط مدونتك :
إقرأ أيضا :
كيف تبدأ مدونة ناجحة في 5 خطوات
كيفية إنشاء مدونة بلوجر والربح منها
أرشفة مدونة بلوجر وتحسين السيو SEO، تهيئة المدونة لمحركات البحث
إلى هنا نكون وصلنا إلى درس اليوم، لا تنسى مشاركة المقالة مع أصدقائك، وترك تعليق محفز، أراك في درس قادم 😉 .
