لورنس
كاتب جيد جدا
شرح ملف robots.txt بالكامل
مثال
كود:
مثال
كود:
اولا كود لتوجيه العناكب جميعا
كود PHP:
User-agent: *
ما هذا الكود ؟
هذا الكود لجميع العناكب و هذا افضل من غيره اي تضع عناكب قوقل بكود وياهو بكود واللخ
و النجمة * تعني جميع العناكب
ثانيا
كود PHP:
Disallow:
هذا يمنع العناكب من الدخول لملفات معينة
كود PHP:
Disallow: /vb/announcement.php
Disallow: /vb/calendar.php
Disallow: /vb/cron.php
Disallow: /vb/editpost.php
Disallow: /vb/faq.php
Disallow: /vb/joinrequests.php
Disallow: /vb/login.php
Disallow: /vb/misc.php
Disallow: /vb/moderator.php
Disallow: /vb/newreply.php
Disallow: /vb/newthread.php
Disallow: /vb/online.php
Disallow: /vb/attachment.php
Disallow: /vb/private.php
Disallow: /vb/profile.php
Disallow: /vb/register.php
Disallow: /vb/search.php
Disallow: /vb/sendmessage.php
Disallow: /vb/showgroups.php
Disallow: /vb/showpost.php
Disallow: /vb/subscription.php
Disallow: /vb/subscriptions.php
Disallow: /vb/threadrate.php
Disallow: /vb/usercp.php
Disallow: /vb/payments.php
Disallow: /vb/memberlist.php
Disallow: /vb/image.php
Disallow: /vb/images/
Disallow: /vb/calendar.php
Disallow: /vb/cron.php
Disallow: /vb/editpost.php
Disallow: /vb/faq.php
Disallow: /vb/joinrequests.php
Disallow: /vb/login.php
Disallow: /vb/misc.php
Disallow: /vb/moderator.php
Disallow: /vb/newreply.php
Disallow: /vb/newthread.php
Disallow: /vb/online.php
Disallow: /vb/attachment.php
Disallow: /vb/private.php
Disallow: /vb/profile.php
Disallow: /vb/register.php
Disallow: /vb/search.php
Disallow: /vb/sendmessage.php
Disallow: /vb/showgroups.php
Disallow: /vb/showpost.php
Disallow: /vb/subscription.php
Disallow: /vb/subscriptions.php
Disallow: /vb/threadrate.php
Disallow: /vb/usercp.php
Disallow: /vb/payments.php
Disallow: /vb/memberlist.php
Disallow: /vb/image.php
Disallow: /vb/images/
مع تغيير images/ بمجلد الاستايل الحالي لتصفح اسرع للعناكب او احذفها افضل
كود PHP:
Allow:
هذا يسمح للعناكب في الدخول الى اي مجلد
ينصح
كود PHP:
Allow: /
Allow: /vb
Allow: /directory
Allow: /host
Allow: /vb
Allow: /directory
Allow: /host
مع تغيير vb و directory و host بمجلدات موقعك
رابعا
اضافة ملفات الخرائط
كود PHP:
Sitemap:
وهي اضافة خرائط موقعك لتوجيه العناكب لها
ينصح بهذا
كود PHP:
يوجد ملف الروبوتس بالمرفق
الملفات المرفقة 
| robots.txt (1.1 كيلوبايت, المشاهدات 90) |
