بسم الله الرحمن الرحيم
اولا شرح تحديد اسم العنكبوت المراد منعه من ارشفة شئ معين
هذا الكود هو عبارة عن كلمة اسم وليكن مثالا ... ويأتي بعدها اسم العنكوب مسبوقا ب :
نبدأ بإذن الله بـ امر المنع وهو امر
الامر هذا يستخدم لمنع محركات البحث من ارشفة اما
1/ ملف 2/ فولدر اوي أي شئ تريده
كيفية استخدامه وهي كالاتي يكتب الامر
كما هو مع وضع علامة
بيكون هيك
جاء وقت المثال ووقت التطبيق
نأخذ مثال لريبوتس تكست مكتوب جاهز ونبدأ نحلله مع بعض
الان وضعت لكم الملف بالاعلي
نأتي للتحليل
وهذه كما قلنا هو ما يأتي بعدها اسم العنكوب
ومن ثم اتي بعدها
وبعدها اتي
طبعا هذا البوت تبع جوجل اقصد العنكوب الخاص بجوجل
طبعا فهمنا هذي
اذا كنا فهمناها ندخل علي السطر الثاني من الكود
لاحظوا كيف كتبت واعتقد انها اتشرحت قبل هيك
ندخل في جانب اخر من جوانب الريبوتس
سؤوال يطرح نفسه هنا !
هل علشان اعمل ريبوتس هكتب كل انواع العناكب ؟؟؟
الاجابة بالطبع لا
فالحاجة ام الاختراع وعلشان هيك عملوا علامة تخص كل العناكب
ومعناها ان الاسطر التي تاني بعد كلمة User-agent: في السطر الثاني يتم تطبيقة علي جميع العناكب التي تدخل موقعك
هذه العلامة هي
يعني لو عايزين ملف ريبوتس جديد يا بإستخدام هذه العلامة هيكون هيك
واعتقد وضحناها وحللنا الكود بالكامل في الاعلي
وطبعا ملف الروبتس بيكون علي الامتداد
www.yorsitename.com/robots.txt
منقول
وظيفة ملف الروبتس :
يستخدم هذا الملف لمنع محركات البحث من ارشفة شئ معين علي موقعك سواء ملف او فولدر
يستخدم هذا الملف لمنع محركات البحث من ارشفة شئ معين علي موقعك سواء ملف او فولدر
اولا شرح تحديد اسم العنكبوت المراد منعه من ارشفة شئ معين
PHP:
User-agent
نبدأ بإذن الله بـ امر المنع وهو امر
PHP:
Disallow
1/ ملف 2/ فولدر اوي أي شئ تريده
كيفية استخدامه وهي كالاتي يكتب الامر
PHP:
Disallow
PHP:
:
PHP:
Disallow : رابط الملف المراد منعه علي موقعك
نأخذ مثال لريبوتس تكست مكتوب جاهز ونبدأ نحلله مع بعض
PHP:
User-agent: Googlebot
Disallow: /cgi-bin/
نأتي للتحليل
PHP:
User-agent
ومن ثم اتي بعدها
PHP:
:
PHP:
Googlebot
طبعا فهمنا هذي
اذا كنا فهمناها ندخل علي السطر الثاني من الكود
PHP:
Disallow: /cgi-bin
ندخل في جانب اخر من جوانب الريبوتس
سؤوال يطرح نفسه هنا !
هل علشان اعمل ريبوتس هكتب كل انواع العناكب ؟؟؟
الاجابة بالطبع لا
فالحاجة ام الاختراع وعلشان هيك عملوا علامة تخص كل العناكب
ومعناها ان الاسطر التي تاني بعد كلمة User-agent: في السطر الثاني يتم تطبيقة علي جميع العناكب التي تدخل موقعك
هذه العلامة هي
PHP:
*
PHP:
User-agent: *
Disallow: /cgi-bin/
وطبعا ملف الروبتس بيكون علي الامتداد
www.yorsitename.com/robots.txt
منقول