شرح: خيارات التحكم ببرامج الزحف والفهرسة

"عناكب البحث" هي مجرد برامج آلية وظيفتها الزحف نحو صفحات الويب من خلال الروابط herf أو scr  ثم فهرستها وأرشفتها، أشهرها روبوت (أو عنكبوت) قوقل المسمى Googlebot، هناك عدة طرق للتحكم بهذه البرامج الآلية، بالنسبة لمدونات البلوجر هناك ثلاث طرق إما بملف robots.txt  أو بالعلامات Meta Tags  أو من خلال لوحة التحكم وهي الأفضل لأنها أوضح وتستخدم نافذة خيارات رسومية لا مجال لنسيان فاصلة أو نقطة!، الإعدادت الإفتراضية ممتازة ولست مضطراً للتعديل، إلا في حالات نادرة عندما لا ترغب في ظهور محتوى معين في نتائج البحث ... تابعني ←

أهدف من هذه التدوينة إفهام المستفيد خيارات التحكم ببرامج الزحف في مدونته؛ بعد اطلاعي على العديد من الشروح التي لم تسلم من الأخطاء والتناقضات، الخيارات مباشرة وميسره يمكنك فهمها إن شاء الله ، وبالتالي يمكنك فعلها - ان اضطررت - بنفسك، أو على الأقل تستوعب أي شرح تقرأه مستقبلاً وتتلمس ما إذا كان هذا الشرح سليم أم به علة!.

1. نافذة إعداد " علامات رؤوس مخصصة لبرامج الروبوت " 

وهي لوحة الإعدادت الرئيسية لمدونة البلوجر، للتحكم ببرامج الزحف، ويمكن الوصول اليها كالتالي

• "لوحة التحكم" > "إعدادت" > "تفضيلات البحث" 
• اضغط على كلمة  "تحرير"
• ثم اختر  "نعم" 

تلاحظ في هذه النافذة ثلاثة مربعات تتكرر فيها نفس الخيارات:

1. "الصفحة الرئيسية" : وهو خاص بالتحكم بالزحف والفهرسه داخل الصفحة الرئيسية ( أهم صفحة! )

2. " صفحات الأرشيف والبحث " : كل المشاركات التي تنشرها خلال شهر تؤرشف أرشيفاً شهرياً في صفحة مستقلة  وسبق أن شرحت في تدوينة سابقة كيف يمكن منع فهرسة صفحات الأرشيف حتى لا تعتبر محتوى مكرر ، أما صفحات البحث فهي افتراضياً ممنوعة بملف robots.txt  الإفتراضي.

3. " الافتراضي للمشاركات والصفحات " : القيمة الإفتراضية لكل مشاركة جديدة تكتبها أو صفحة ثابته هي " ALL " أي السماح بالحفظ والفهرسة ، مع إمكانك تغيير هذه الإعدادت حال تحريرك للمشاركة أو الصفحة ، إذاً خيارات هذا المربع تساعدك في تغيير القيم الإفتراضية فإن كان غالب مشاركاتك وصفحاتك لا ترغب في ارشفتها فاجعله خياراً افتراضياً من هذا المربع .

2. إعدادت التحكم الخاصة بالمشاركات والصفحات

كما ذكرت بعاليه يمكنك إعداد التحكم بالبرنامج الآلي ( أو العنكبوت أو الروبوت ) بصفة مستقلة لكل مشاركة ولكل صفحة ، هذه الإعدادت تظهر في نافذة إعدادت العامة للمشاركات والصفحة في الشريط الأيسر من محرر بلوقر، وتحوي كذلك على نفس الخيارات :

شرح جميع الخيارات

الآن وصلنا إلى لب الموضوع ! ، وسأشرح هنا جميع الخيارات ، مع العلم أنها نفس الخيارات في طريقة التحكم بواسطة العلامات Meta Tags  ، ولاحظ هنا أن معظم هذه الخيارات تبدأ بكلمة no  دلالة على المنع .

• all : وهو الخيار الإفتراضي ،  يعطي الضوء الأخضر لروبوت محركات البحث للفهرسة ( index ) ولتتبع الروابط المكتوبة في الصفحة ( follow ) ، وبالتالي فإن:     all = index + follow

• noindex : منع محرك البحث من فهرسة الصفحة، وبالتالي لن تظهر في نتائج البحث، وهذا الخيار يتضمن كذلك منع حفظ الصفحة بحيث تظهر كنسخة مخبأة في نتائج البحث وبالتالي هي تحمل بداخلها خيار ( noarchive ).

• nofollow : منع روبوت محرك من تتبع جميع الروابط الموجودة في الصفحة، وهذا يذكرنا بعلامة nofollow عند كتابة رابط لا ترغب في ربطه بموقعك ليحتسب باك لينك لصالحة، هنا نفس التأثير لا فرق.

• none : عكس ( all ) ، ويعني لا نرغب بفهرسة الصفحة ( noindex ) ولا نرغب بتتبع الروابط المكتوبة بداخلها ( nofollow ) ، وبالتالي فإن:    none = noindex + nofollow 

• noarchive : منع حفظ الصفحة بحيث لا تظهر كنسخة مخبأة في نتائج البحث، ولكن سيتم فهرستها ( index ).

• nosnippet :  منع ظهور مقتطف من الصفحة في نتائج البحث ، ولا أدري من يريد مثل هذا الخيار! ، ولكني قرأت شرحاً في موقع حول تهيئة مدونة البلوقر جَعلهُ كخيار يضمن أرشفة المدونة "بسرعة البرق" بحيث يتم أرشفة المشاركة بمجرد ضغط زر النشر!!.

• noodp : منع ظهور وصف الصفحة البديل من مشروع الدليل المفتوح ، أحياناً يستخدم محرك البحث مقتطف من هذا الدليل بدلاً من الصفحة ذاتها ، حسب تجربتي لم اقرأ قط مقتطفاً لموقع عربي من هذا الدليل في نتائج البحث! بالإضافة إلى أنني أعتقد أن قوقل ستعتمد على "وصف البحث" الذي يُكتب في مشاركات مدونات البلوجر.

• notranslate :  منع مترجم قوقل من إظهار شريط خيار الترجمة إذا كانت لغة الزائر مختلفة .

• noimageindex : منع فهرسة الصور في الصفحة ، وهذا مفيد إذا كانت صوراً تريد فرض مستوى خصوصية محافظ عن تلك الصور المشاعه.

• unavailable_after : تعيين عمر افتراضي للصفحة؛ بحيث لا تظهر في نتائج البحث بعد تاريخ محدد، هذا التاريخ يجب أن يكتب بصيغة  RFC-850 إذا استخدمت طريقة Meta Tags ولكن هنا ومن لوحة التحكم مجرد أن تضغط بالفأرة داخل الصندوق ستنبثق نافذة التقويم تختار منها ما يناسب .

تنبيه للمرة الأخيرة

حسناً ربما قد فهمت واستوعبت هذه الخيارات وأحسست بالثقة أنك قادر على التعديل فيها ، وأقول لك: لا تفعل :) ؛ فالخيارات الافتراضية تضمن لك فهرسه لمدونتك سليمة لا عيب فيها ، وكما ترى بعض الخيارات نادرة جداً ، فإذا كانت مدونتك لها موضوع نادر مثل أن تكون ( دليل مواقع ) أو ( مدونة ذات خصوصية ) أو تحتوي على صفحات لها وضع خاص ، فها أنت تعلمت كيف يمكنك التحكم بفهرستها وأرشفتها .