مرحباً بعودتك متابع مدونة "تعلم بلوجر" هنا في هذا المقال ، شرح طريقة إنشاء ملف robots.txt مخصص لمدونة بلوجر بالتفصيل للمبتدئين بالصور , الطريقة الصحيحة لإنشاء ملف روبوت robots.txt مخصص لمدونات بلوجر بالتفصيل للمبتدئين وماهي اهمية ملف روبوت في ارشفة محتوي موقعك. في البداية دعنا نوضح لك معني كلمة روبوتس فايل robots.txt :
ماهو ملف روبوتس Robots.txt وما اهميته؟
باختصار شديد ملف روبوت Robots.txt هو ملف يقوم بتوجيه روبوتات وعناكب البحث للصفحات المهمة علي موقعك او الصفحات التي سيتم ارشفتها حيث يخبر هذا الملف عناكب البحث بان هذه الصفحات هي الاهم علي موقعك وهي التي سوف يتم ارشفتها, ويبعدهم ايضاً عن الصفحات غير المهمة والتي لايجب علي عناكب البحث ارشفتها واظهارها علي محركات البحث.
افضل ملف روبوتس robots.txt مخصص
ملف الروبوت مكون من 3 أجزاء مخصصة هنا شرحها بالتفصيل:
الجزء الاول هو : User-agent: Mediapartners-Google
وهو مخصص بشكل اساسي للاعلانات علي مدونتك وتحديداً جوجل ادسنس حيث يتم تحليل مدونتك بعد اضافة هذا الكود لمعرفة محتوي موقعك واضافة اعلانات تتناسب مع محتوي موقعك بشكل افضل.
الجزء الثاني هو : User-agent: *
هذا الجزء من الكود مخصص للمنع والسماح بالزحف لملفات معينة داخل محتوي موقعك فمثلاً اذا كنت تريد السماح بارشفة كل محتوي موقعك فسنضيف بعد هذا الامر مباشرة كلمة Allow: / كما هو في ملف الروبوت المرفق في الشرح اما اذا كنت تريد منع الزحف الي عمليات البحث مثلاً داخل موقعك فقم باضافة هذا الامر Disallow: /search.
الجزء الثالث هو : Sitemap
وهو الملف الذي يحتوي علي محتوي موقعك بالكامل بشكل متجدد حيث يتم فحص هذا الملف بشكل مستمر في كل مرة يدخل فيها عناكب البحث علي موقعك في حالة ما اذا قمت باضافة تدوينة جديدة الي موقعك لكي يتم ارشفتها.
شرح إضافة ملف روبوت robots.txt مخصص لمدونات بلوجر هنا
شرح إضافة ملف روبوت robots.txt مخصص لمدونات بلوجر هنا
