شرح ملف الروبتس robots txt بوابة المواقع

Eng Ahmed

ادارة المنتدى
9 مارس 2008
3,318
11
38
www.support-ar.com
بسم الله الرحمن الرحيم

وظيفة ملف الروبتس :
يستخدم هذا الملف لمنع محركات البحث من ارشفة شئ معين علي موقعك سواء ملف او فولدر

اولا شرح تحديد اسم العنكبوت المراد منعه من ارشفة شئ معين

PHP:
User-agent
هذا الكود هو عبارة عن كلمة اسم وليكن مثالا ... ويأتي بعدها اسم العنكوب مسبوقا ب :
نبدأ بإذن الله بـ امر المنع وهو امر

PHP:
Disallow
الامر هذا يستخدم لمنع محركات البحث من ارشفة اما
1/ ملف 2/ فولدر اوي أي شئ تريده
كيفية استخدامه وهي كالاتي يكتب الامر

PHP:
Disallow
كما هو مع وضع علامة
PHP:
:
بيكون هيك
PHP:
Disallow : رابط الملف المراد منعه علي موقعك
جاء وقت المثال ووقت التطبيق
نأخذ مثال لريبوتس تكست مكتوب جاهز ونبدأ نحلله مع بعض

PHP:
User-agent: Googlebot
Disallow: /cgi-bin/
الان وضعت لكم الملف بالاعلي
نأتي للتحليل

PHP:
User-agent
وهذه كما قلنا هو ما يأتي بعدها اسم العنكوب
ومن ثم اتي بعدها

PHP:
:
وبعدها اتي
PHP:
Googlebot
طبعا هذا البوت تبع جوجل اقصد العنكوب الخاص بجوجل
طبعا فهمنا هذي
اذا كنا فهمناها ندخل علي السطر الثاني من الكود

PHP:
Disallow: /cgi-bin
لاحظوا كيف كتبت واعتقد انها اتشرحت قبل هيك

ندخل في جانب اخر من جوانب الريبوتس
سؤوال يطرح نفسه هنا !
هل علشان اعمل ريبوتس هكتب كل انواع العناكب ؟؟؟
الاجابة بالطبع لا
فالحاجة ام الاختراع وعلشان هيك عملوا علامة تخص كل العناكب
ومعناها ان الاسطر التي تاني بعد كلمة User-agent: في السطر الثاني يتم تطبيقة علي جميع العناكب التي تدخل موقعك
هذه العلامة هي
PHP:
*
يعني لو عايزين ملف ريبوتس جديد يا بإستخدام هذه العلامة هيكون هيك

PHP:
User-agent: *
Disallow: /cgi-bin/
واعتقد وضحناها وحللنا الكود بالكامل في الاعلي

وطبعا ملف الروبتس بيكون علي الامتداد
www.yorsitename.com/robots.txt

منقول

 

samuil_9

عضو جديد
10 مارس 2009
10
0
0
شرح مميز جداااااا
تسلم ايدك