تعرف على ملف robots.txt وكيفية اضافته لمدونات بلوجر

في هذه التدوينة سنتعرف على ملف robots.txt وكيفية اضافته لمدونات بلوجر فهذا الملف ضروري لمدونة blogger من أجل فهرسة الموقع بالشكل الصحيح , فهو الذي يتحكم بالسماح لمحركات البحث بالعثور على موقعك او عدم السماح بذلك وهذا ما سنعرفه في السطور التالية:

ما هو ملف robots.txt ؟

- ملف robots.txt:
 هو وسيلة تمكنك من تنبيه محرك البحث بأنك لا تريده أن يزحف الى صفحات موقعك ويقوم بفهرستها , اي أنه وسيلة تمكنك من منع ظهور موقعك أو جزء منه في محركات البحث.
ولكن من لا يرغب في أن يرى صفحات موقعه في أول نتائج البحث ؟
هناك مواقع شخصية تحتوي على صور قد لايرغب صاحبها بأن يراها الزوار وهناك مواقع تحتوي على مجلدات فيها كلمات السر وأمور خاصة أخرى وهنا يأتي دور هذا الملف الذي من خلاله يستطيع صاحب الموقع منع محرك البحث من فهرسة مجلد ما أو الموقع كاملا.

كيف أضع ملف robots.txt في موقعي ؟

 طبعا هناك عدة طرق على حسب نوع الموقع وسأتكلم هنا عن كيفية وضع ملف robots.txt في مدونات بلوجر , اتبع الخطوات التالية:

1- سجل دخولك الى بلوجر
2- اذهب الى إعدادات
3- اضغط على تفضيلات البحث
4- اضغط على "تحرير" التي بجانب عبارة "ملف robots.txt مخصص"

5- الآن ضع هذا النص في المربع الذي سيظهر لك بعد تعديل رابط مدونتي الملون باللون الأحمر الى رابط مدونتك:

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://www.tornado-blog.xyz/feeds/posts/default?orderby=updated

6- اضغط على "حفظ التغييرات"
وهكذا نكون قد أضفنا ملف robots.txt الى مدونات بلوجر.
والآن اضغط على "تحرير" التي بجانب عبارة "علامات رؤوس مخصصة لبرامج الروبوت" وضع علامة صح امام الخيارات كما في الصورة التالية :

وهي أوامر خاصة للروبوت أو بالأحرى عناكب البحث وعند حفظ التغييرات ستجدون عند كتابة اي تدوينة خيار جديد هو "علامات مخصصة لبرامج الروبوت" ويجب أن تقوموا بالتالي عند كتابة التدوينة
1- اضغطوا على "علامات مخصصة لبرامج الروبوت"
2- قوموا بازالة علامة صح عن كلمة nosnippet وكلمة noodp كما بالصورة التالية :

3- اضغطوا على تم .
** تذكروا أن تفعلوا هذه التغييرات في كل تدوينة لا تنسوا ذلك حتى تحصلوا على نتائج مرضية.

- حسنا ولكن ما معنى هذه الأوامر ؟

الأمر	معناه
all	يعني أنه لايوجد أي مانع أو قيد من فهرسة الموقع
noindex	يعني عدم عرض هذه التدوينة في محرك البحث وعدم عرضها كنسخة مخبأة
nofollow	يعني عمل nofollow  هذه التدوينة
none	بمعنى noindex و nofollow
noarchive	يعني عدم عرض نسخة مخبأة لهذه التدونة
nosnippet	يعني لا تُظهر أي جزء أو اقتباس من هذه التدوينة في محرك البحث
noodp	يعني لا تستخدم البيانات الوصفية لعناوين هذه التدوينة
notranslate	يعني لا تعمل ترجمة لهذه التدوينة للغات أخرى
Noimageindex	يعني لا تعمل فهرسة لصور هذه التدوينة
unavailable_after:	يعني لا تفهرس هذه التدوينة بعد الوقت المحدد وتضع الوقت في الفراغ اسفل الخيار

- وما يهمنا من هذه الأوامر هو 3 فقط هي :
* noimageindex : وهي مهمة لأصحاب المواقع التي فيها صور شخصية ولا يريدون اظهارها في محركات البحث.
* noindex : وهذا الامر يستعمله اصحاب المواقع التي لايريدون نشر محتوياتها في محرك البحث 
* nofollow:  وهذا يستعمله اصحاب ادلة المواقع اذا ارادوا أن يعملوا nofollow لروابط المواقع التي بالدلليل.

 والى هنا أكون قد انتهيت من الشرح ارجو أن يكون مفيدا وواضحا فأنا أعرف أن مثل هذه الأمور معقدة ولكننا نحتاج أن نتعلمها لكي تصبح الأرشفة قوية.