الدرس الخامس : شرح ملف الروبوت robots .txt
هناك ملف ان كان اصلا موجود في موقعك اسمه robot.txt قد يكون هو المسؤول عن ارشفة موقعك ومعروف بـ عناكب محركات البحث وملف الروبوت هو المسؤول عن توجيه عناكب البحث في موقعك ودورها هو تصفح موقعك تلقائيا وأرشفة محتوياته .
قالمحمي قام بتوجيه الروبوت ومنعه من دخول بعض الامور الشخصية والتي لايريد صاحب الموقع نشرها
ام الغير محمي فالعناكب تدخل الى جميع الاماكن في موقعه وقد تنشر محتويات لايريد نشرها
والان سنشرح كيف تهيأ هدا الملف كي يكون فعالا لتسريع الارشفة
:User-agent: *
Allow:
هدا الكود يسمح للعناكب بتصفح موقعك دون استثناء , جوجل وياهو وكل محركات البحث
Disallow:
هد الكود يمنعهم من دخول بعض الملفات والمجلدات التي تحددها انت
مثلا
Disallow: / images/
Allow:
بها تحدد الملفات والمجلدات التي يسمح الدخول اليها
مثلا :
Allow: / images/
ربما تتساءل اين يوضع هدا الملف ؟
يوضع فى مجلد الموقع الرئيسى , بمعنى ان رابط الملف بعد تركيبه يجب ان يكون على الشكل التالي :
http://www.example.com/robots.txt
وفي حالة كانت لديك مدونة على نطاق مجاني ( بلوجر – وورد بريس ) اتبع الخطوات التالية
إعداد ملف الروبوت لمدونات بلوجر
ادخل الى مدونتك
انتقل إلى إعدادات | تفضيلات البحث وانقر على تعديل بجوار "ملف robots.txt مخصص". أدخل المحتوى الذي تريد أن تتجاهله برامج روبوت الويب.
على سبيل المثال:
:User-agent: *
Disallow: / images/
او بالدخول الى كود الصفحة ومن تم تحث وسم <head> ادخل الوسوم التالية بجانب meta tags
<meta content='all' name='robots'/>
<meta content='index, follow' name='robots'/>
بحيث تسمح للعناكب بالزحف الى جميع محتويات موقعك
الدروس السابقة
رابط لمقدمة محتويات الدورة كلها الدرس الاول : مقدمة الى تهيئة المواقع لمحركات البحث -اشهار المواقع والمنتديات
ادوات سنحتاجها في تعلم دروس تهيئة المواقع لمحركات البحثSEO
الدرس الثاني : لنتعرف على تقينة تهيئة الموقع لمحركات البحثSEO
الدرس الثالث : انسى محركات البحث وركز
للتوصل بجديد الدروس
جديد التقنية - رشيد العواد
www.jadidtech.com
Comments
Post a Comment