شرح: خيارات التحكم ببرامج الزحف والفهرسة

شرح: خيارات التحكم ببرامج الزحف والفهرسة

"عناكب البحث" هي مجرد برامج آلية وظيفتها الزحف نحو صفحات الويب من خلال الروابط herf أو scr  ثم فهرستها وأرشفتها، أشهرها روبوت (أو عنكبوت) قوقل المسمى Googlebot، هناك عدة طرق للتحكم بهذه البرامج الآلية، بالنسبة لمدونات البلوجر هناك ثلاث طرق إما بملف robots.txt  أو بالعلامات Meta Tags  أو من خلال لوحة التحكم وهي الأفضل لأنها أوضح وتستخدم نافذة خيارات رسومية لا مجال لنسيان فاصلة أو نقطة!، الإعدادت الإفتراضية ممتازة ولست مضطراً للتعديل، إلا في حالات نادرة عندما لا ترغب في ظهور محتوى معين في نتائج البحث ... تابعني ←
أهدف من هذه التدوينة إفهام المستفيد خيارات التحكم ببرامج الزحف في مدونته؛ بعد اطلاعي على العديد من الشروح التي لم تسلم من الأخطاء والتناقضات، الخيارات مباشرة وميسره يمكنك فهمها إن شاء الله ، وبالتالي يمكنك فعلها - ان اضطررت - بنفسك، أو على الأقل تستوعب أي شرح تقرأه مستقبلاً وتتلمس ما إذا كان هذا الشرح سليم أم به علة!.

1. نافذة إعداد " علامات رؤوس مخصصة لبرامج الروبوت " 

وهي لوحة الإعدادت الرئيسية لمدونة البلوجر، للتحكم ببرامج الزحف، ويمكن الوصول اليها كالتالي
  • "لوحة التحكم" > "إعدادت" > "تفضيلات البحث" 
  • اضغط على كلمة  "تحرير"
  • ثم اختر  "نعم



تلاحظ في هذه النافذة ثلاثة مربعات تتكرر فيها نفس الخيارات:

1. "الصفحة الرئيسية" : وهو خاص بالتحكم بالزحف والفهرسه داخل الصفحة الرئيسية ( أهم صفحة! )

2. " صفحات الأرشيف والبحث " : كل المشاركات التي تنشرها خلال شهر تؤرشف أرشيفاً شهرياً في صفحة مستقلة  وسبق أن شرحت في تدوينة سابقة كيف يمكن منع فهرسة صفحات الأرشيف حتى لا تعتبر محتوى مكرر ، أما صفحات البحث فهي افتراضياً ممنوعة بملف robots.txt  الإفتراضي.

3. " الافتراضي للمشاركات والصفحات " : القيمة الإفتراضية لكل مشاركة جديدة تكتبها أو صفحة ثابته هي " ALL " أي السماح بالحفظ والفهرسة ، مع إمكانك تغيير هذه الإعدادت حال تحريرك للمشاركة أو الصفحة ، إذاً خيارات هذا المربع تساعدك في تغيير القيم الإفتراضية فإن كان غالب مشاركاتك وصفحاتك لا ترغب في ارشفتها فاجعله خياراً افتراضياً من هذا المربع .


2. إعدادت التحكم الخاصة بالمشاركات والصفحات

كما ذكرت بعاليه يمكنك إعداد التحكم بالبرنامج الآلي ( أو العنكبوت أو الروبوت ) بصفة مستقلة لكل مشاركة ولكل صفحة ، هذه الإعدادت تظهر في نافذة إعدادت العامة للمشاركات والصفحة في الشريط الأيسر من محرر بلوقر، وتحوي كذلك على نفس الخيارات :



شرح جميع الخيارات

الآن وصلنا إلى لب الموضوع ! ، وسأشرح هنا جميع الخيارات ، مع العلم أنها نفس الخيارات في طريقة التحكم بواسطة العلامات Meta Tags  ، ولاحظ هنا أن معظم هذه الخيارات تبدأ بكلمة no  دلالة على المنع .



  • all : وهو الخيار الإفتراضي ،  يعطي الضوء الأخضر لروبوت محركات البحث للفهرسة ( index ) ولتتبع الروابط المكتوبة في الصفحة ( follow ) ، وبالتالي فإن:     all = index + follow


  • noindex : منع محرك البحث من فهرسة الصفحة، وبالتالي لن تظهر في نتائج البحث، وهذا الخيار يتضمن كذلك منع حفظ الصفحة بحيث تظهر كنسخة مخبأة في نتائج البحث وبالتالي هي تحمل بداخلها خيار ( noarchive ).


  • nofollow : منع روبوت محرك من تتبع جميع الروابط الموجودة في الصفحة، وهذا يذكرنا بعلامة nofollow عند كتابة رابط لا ترغب في ربطه بموقعك ليحتسب باك لينك لصالحة، هنا نفس التأثير لا فرق.


  • none : عكس ( all ) ، ويعني لا نرغب بفهرسة الصفحة ( noindex ) ولا نرغب بتتبع الروابط المكتوبة بداخلها ( nofollow ) ، وبالتالي فإن:    none = noindex + nofollow 



  • noarchive : منع حفظ الصفحة بحيث لا تظهر كنسخة مخبأة في نتائج البحث، ولكن سيتم فهرستها ( index ).



  • nosnippet :  منع ظهور مقتطف من الصفحة في نتائج البحث ، ولا أدري من يريد مثل هذا الخيار! ، ولكني قرأت شرحاً في موقع حول تهيئة مدونة البلوقر جَعلهُ كخيار يضمن أرشفة المدونة "بسرعة البرق" بحيث يتم أرشفة المشاركة بمجرد ضغط زر النشر!!.


  • noodp : منع ظهور وصف الصفحة البديل من مشروع الدليل المفتوح ، أحياناً يستخدم محرك البحث مقتطف من هذا الدليل بدلاً من الصفحة ذاتها ، حسب تجربتي لم اقرأ قط مقتطفاً لموقع عربي من هذا الدليل في نتائج البحث! بالإضافة إلى أنني أعتقد أن قوقل ستعتمد على "وصف البحث" الذي يُكتب في مشاركات مدونات البلوجر.


  • notranslate :  منع مترجم قوقل من إظهار شريط خيار الترجمة إذا كانت لغة الزائر مختلفة .



  • noimageindex : منع فهرسة الصور في الصفحة ، وهذا مفيد إذا كانت صوراً تريد فرض مستوى خصوصية محافظ عن تلك الصور المشاعه.


  • unavailable_after : تعيين عمر افتراضي للصفحة؛ بحيث لا تظهر في نتائج البحث بعد تاريخ محدد، هذا التاريخ يجب أن يكتب بصيغة  RFC-850 إذا استخدمت طريقة Meta Tags ولكن هنا ومن لوحة التحكم مجرد أن تضغط بالفأرة داخل الصندوق ستنبثق نافذة التقويم تختار منها ما يناسب .

تنبيه للمرة الأخيرة

حسناً ربما قد فهمت واستوعبت هذه الخيارات وأحسست بالثقة أنك قادر على التعديل فيها ، وأقول لك: لا تفعل :) ؛ فالخيارات الافتراضية تضمن لك فهرسه لمدونتك سليمة لا عيب فيها ، وكما ترى بعض الخيارات نادرة جداً ، فإذا كانت مدونتك لها موضوع نادر مثل أن تكون ( دليل مواقع ) أو ( مدونة ذات خصوصية ) أو تحتوي على صفحات لها وضع خاص ، فها أنت تعلمت كيف يمكنك التحكم بفهرستها وأرشفتها .

التعليقات: 44

Unknown يقول... 28 مارس 2013 في 3:09 م

شكرا لك أخي على الشرح والتوضح

Unknown يقول... 28 مارس 2013 في 5:15 م

بصراحه استفدت منك
شكرا اخى جاسر وبارك الله فيك

ar-free-software يقول... 29 مارس 2013 في 10:38 ص

جزاك الله كل خير على الطرح الرائع
عرب سوفت وير

Jaser Alharbi يقول... 29 مارس 2013 في 11:30 ص

السلام عليكم

حياكم الله إخواني وبياكم ج1


أخ محمود : لا أستطيع مساعدتك هذا أولاً، ثانياً لا أتدخل في قالب أستاذ ذؤيب ، ثالثاً لا أشارك في مدونة فيها محتوى محرمات كالأبراج وصور النساء .. رابعاً: لا أظنني قادر على مساعدتك مستقبلاً في أي شيء ، هداني الله وإياك !

Mostafa يقول... 2 أبريل 2013 في 10:47 م

أستاذي العزيز يعني كيف أفعل
هل أجعلها ممكنة بدون أن أعمل أي إشارة أمام المربعات أو أتركها معطلة الله يرضى عليك ويبارك فيك فأنا مازلت في بداية المشوار مع التدوين لو تتكرم وتعمل زيارة لمدونتي وتخبرني برأيك علماً أني أريد أن أسجل نطاق خاص بمدونتي ياريت لو تفيدني بذك ولك مني دعوة في ظهرالغيب
وأيضاً أريد قالب خاص ومميز يعبر عن مدونتي فياريت لو تنصحني بالمفيد
هذا رابط مدونتي إن كان وضع الرابط مخالف لشروط مدونتك فأرجوك العفو
http://asoofi.blogspot.com/

تقبل خالص تحياتي

Jaser Alharbi يقول... 3 أبريل 2013 في 8:14 ص

@مصطفى:

- نعم اجعلها معطلة.

- أنصحك بان تشتري دومين من لوحة تحكم بلوقر ، وإياك والشراء من شركات ضعيفة ، ابدأ من تبويب إعدادت ثم "إضافة نطاق مخصص" واتبع الخطوات التي ليس فيها تعقيد ، سيتم ربط الدومين بدون أي تدخل منك بعد أيام قليله.

_ بالنسبة للقالب أنصحك بالقوالب الرسمية ثم امضي الكثير من الوقت في تخصيصة من لوحة التحكم ، أو اختر قالباً مخصصاً ولكن للأسف كثير من معربي ومطوري القوالب يدمجون فيها اكواد غير جيدة ، أو تكون منقوصة ، أو ملغمة برواط لمواقعهم ، ثم يبدأ مسلسل المشاكل والبحث عن حلول ... هذه تجربتي التي لمستها من مشاكل المستخدمين معظمها سوء القالب المستخدم ..


أتمنى لك التوفيق والسداد

Mostafa يقول... 3 أبريل 2013 في 2:22 م

جزاك الله خير أخي
على أي شركة تنصحني أشتري دومين من جوجل على eNom أو GoDaddy.

وأي لاحقة هي الأفضل

أتمنى لك التوفيق في مشوارك

Jaser Alharbi يقول... 3 أبريل 2013 في 2:40 م

وجزاك الله خير

enom لم أجربها ، دومين مدونتي من قودادي ولم أعاني اي مشكلة ، والاسمان كبيران في هذا المجال ...

أما اللاحقة فافضل com بالطبع

غير معرف يقول... 5 أبريل 2013 في 7:14 م

تسلم على الشرح الوافي

ISLAM ZAIN يقول... 6 أبريل 2013 في 2:56 ص

الف شكر علي الشرح المتميز
ولكن عندي استفسار بخصوص الارشفه اليومين دول عندي ف الموقع بقت منعدمه يعني كل يومين تقريبا

Unknown يقول... 6 أبريل 2013 في 6:34 م

شكرا لك موضوع مميز حقا والكثير لا يعرف عنه اى شئ
تفضلو بزيارة مدونتي واعطوني ارائكم
نيو تكنولوجي تيوب

dd يقول... 10 أبريل 2013 في 3:23 م

أنا بدوري كنت عامل هدا التخربيق
شكرا على التوضيح يا غالي
http://www.mycomputer-now.com/

Jaser Alharbi يقول... 11 أبريل 2013 في 10:33 ص

[color="green"][center]
السلام عليكم

حياكم الله إخواني ، ويشرفني زيارة مدوناتكم

بالنسبة لتأخر الأرشفة ، يصعب التكهن حقيقة ، ولكن بشكل عام مدونات بلوقر هي تلقائياً صديقة لمحركات البحث ، عليك مراجعة التغييرات التي أجريتها قبل المشكلة أو القالب إذا كنت قمت بتغييره ...

هناك الكثير يقدمون أكواد صديقة لقوقل ولكنها في الحقيقة ضارة .. ضارة ..

[/center][/color]

Unknown يقول... 13 أبريل 2013 في 12:33 ص

شكرا لك أخي بارك لله فيك أتمنى زيارتك لمدونتي وإبدء رأيك هذه هي حول التكنولوجيا المتطورة للهواتف الذكية
http://oridamazon.blogspot.com/

LAMRI SEYF يقول... 15 أبريل 2013 في 3:00 م

شكراااا لك تم التطبيق على مدوناتي :

قلعة الربح من الأنترنت

www.alribah.blogspot.com

مدونة سيف التعليمية

www.saifeduc.blogspot.com

معهد أرباحي

www.arba7i.com

شكرااا لعى الدرس الرائع والجميل شكرااا

Unknown يقول... 15 أبريل 2013 في 3:31 م

شكرا لك على الدرس القيم
برامج مشروحة ومصورة تهتم ايضا باخبار الانترنيت واضافات البلوجر الاحترافية والاخبار اللتقنية
wwww.ma3lomagood.blogspot.com

Unknown يقول... 15 أبريل 2013 في 3:40 م

عدرا المدونة في الاعلى نسيت ووضعت اربع w يرجى حدف واحدة هكدا
www.ma3lomagood.blogspot.com

arabtion يقول... 20 أبريل 2013 في 12:08 م

سؤال معلش واتمني انك ترد عليا انا عندما انشر مشاركة اعمل فى برامج الربوت الاختيارات دى اتمني انى اعرف صح ولا غلط all+noarchive+notranslate يهمني التأكد منك ومعرفة الصح لو مفيش ايتها مانع عرب مصر Arabmisr

Jaser Alharbi يقول... 20 أبريل 2013 في 5:19 م

منطقياً هناك تعارض بين noarchive وبين all ، لأن all تعني لا قيود ، ولكن عملياً هذا لا يهم فبالرغم من أنها متعارضه إلا أن قوقل سيكون محافظ أي سيختار noarchive و notranslate .

ولكن الأفضل هو إزالة خيار all

arabtion يقول... 20 أبريل 2013 في 7:59 م

طب انا يهمني اعرف الاختيارات الصحيحة واللى يجب التعامل معها ارجو ان تقول لية ارجوك قولي الاختيارات الصحية وجزاك الله كل خير

arabtion يقول... 20 أبريل 2013 في 8:02 م

والمشكلة هنا لو لو قمت بالتغيير فى المربعات هيحصل تجاهل لمدونتي ع محركات بحث جوجل

Jaser Alharbi يقول... 20 أبريل 2013 في 11:02 م

الصحيح أن لا تعدل في هذه الخيارات ، وقد اطلعت على كثير من الشروح فيها اخطاء وتناقضات . الإعدادت الإفتراضية تؤدي الغرض بامتياز فلا أنصح بدخول دوامة الأكواد والخيارات التي يقدمها الكثير على أنها ستحقق الإنتشار وما إلى ذلك من فرقعات وصراخ!

الشيء الوحيد الذي ربما يكون مفيد هو منع فهرسة صفحات الأرشيف ، ولاحظ قلت: ربما :

[url="http://www.alblogger.com/2013/03/avoid-duplicated-archive.html"]تجاوز: المحتوى المكرر بمنع فهرسة وحفظ صفحات الأرشيف [/url]

.
.

arabtion يقول... 21 أبريل 2013 في 2:30 ص

يعني انا دلوقتى يابرنس مش اغير حاجة اشتغل زى ما بدأت علشان مش يحصل ضرر صح

Unknown يقول... 21 أبريل 2013 في 5:43 ص

شكرا لك يا اخى شرح رائع جداا بتوفيق ان شاء الله

http://bilokr.blogspot.com/

Jaser Alharbi يقول... 21 أبريل 2013 في 5:58 م

@مستر محمد: صح ونص.


@السيد ابو جبل: العفو ، حياك الله.

Samira tfrawt يقول... 30 أبريل 2013 في 12:00 ص

شكرا اخى جاسر وبارك الله فيك

http://adonia2.blogspot.com/

Jaser Alharbi يقول... 22 مايو 2013 في 2:55 م

[color="blue"].

حياكم الله إخواني وبياكم ج6 ، شرفتُ بكم [/color]

غير معرف يقول... 19 يونيو 2013 في 8:57 ص

يعطيك العافية مبدع كعادتك
انا عندي مدونة خاصة لكن المشكلة كود ترقيم الصفحات لا يعمل بالمدونة الخاصة
تقدر تدبر لنا طريقة من هنا و لا هناك ت6
و اذا لا ابي اخلي المدونة عامة و اعطل خيارات برامج الزحف و الارشفة
تتأرشف بكذا و تظهر المدونة او لا ما تظهر الا لمن لديه الرابط ؟
شاااااكرين لك

غير معرف يقول... 30 يونيو 2013 في 3:45 ص

موضوع اكثر من رائع
www.atlantasoft.blogspot.com

Unknown يقول... 9 يوليو 2013 في 8:39 م

شرح كيفية نشر موقعك أو مدونتك على أكثر من 200 محرك بحث - أغلبها لجوجل

http://invention-arabe.blogspot.com/2013/07/200.html

http://invention-arabe.blogspot.com/2013/07/200.html

Unknown يقول... 4 أكتوبر 2013 في 6:39 م

hona-alhal.blogspot.com

سمعنا قران يقول... 9 أكتوبر 2013 في 3:10 م

ت4

Unknown يقول... 15 فبراير 2014 في 2:06 ص

رائع :D
http://www.robinsonclubagadir.com/

Unknown يقول... 15 فبراير 2014 في 5:32 م

أكثر من رائع

Art In Decoration يقول... 23 فبراير 2014 في 7:40 ص

تسلم على المعلومة تمة الاضافة
http://www.arabworlde.com/

Unknown يقول... 13 أبريل 2014 في 12:47 ص

شكرا لك وجزاكم الله خيرا وبارك لك

Ayban-Alkadri يقول... 17 يونيو 2014 في 10:25 م

الله يبارك فيك اخي الكريم

http://al2f.blogspot.com/

DR يقول... 10 أغسطس 2014 في 10:31 م

شكرا لك
رابط مدونتي اذا لم يكن لديك مانع
http://mycoffeeandmybook.blogspot.com/

Ilyas يقول... 5 فبراير 2015 في 1:17 ص

تهيئة الصور من أجل السيو

شكراا اخي اتمنى من الجميع زيار هذا الموضوع

Unknown يقول... 23 أبريل 2015 في 2:49 م

شكرا على الموضوع
http://dalil-ta7mil.blogspot.com

غير معرف يقول... 30 يونيو 2015 في 12:40 م

موقع عالم التقنية الجزائرية هو موقع ينشر الأخبار والدروس والمقالات في شتى مجالات التقنية المعروفة. تقدم المدونة بشكل يومي آخر أخبار وجديد أجهزة الحاسب والجوال وغيرها من الأجهزة التقنية، كما تنشر دروس البرمجة والتصميم بالإضافة إلى المقالات التقنية العامة . http://tech1dz.blogspot.com

nwars يقول... 16 يوليو 2015 في 2:25 ص

السلام عليكم وجزاك الله خيرا
حابب اسال سؤال خارج الدرس اريد ان يظهر معي عدد المشاركات في نفس القسم مثلا العاب جنبها رقم 5 يعني نشرت 5 مشاركات في قسم الالعاب وشكرا

nwars يقول... 16 يوليو 2015 في 2:26 ص

السلام عليكم وجزاك الله خيرا
حابب اسال سؤال خارج الدرس اريد ان يظهر معي عدد المشاركات في نفس القسم مثلا العاب جنبها رقم 5 يعني نشرت 5 مشاركات في قسم الالعاب وشكرا

anbarprogram يقول... 1 أبريل 2016 في 9:18 ص

ج7

إرسال تعليق