بسم الله الرحمن الرحيم
السلام عليكم و رحمة الله تعالى و بركاته
كمتصفح لمنتديات ترايدنت منذ سنوات .. و على وجه الخصوص منتدى تقنيات المواقع seo .. أرى أن هناك الكثير من الأمور يتم التلاعب بها .. و يتم تعقيدها و الإكثار من المواضيع المكررة .. حتى يحتار المستخدم العربي .. بل يمل و يندم على أنه وضع كلمة معينة في محرك بحث المنتدى .. إخواني الكرام .. أنا أستغرب .. كيف أن المحتوى العربي مكرر و غير منظم .. و مضلل في أكثر الأحيان .. و أنا لا أعمم هذا الأمر .. فهناك الكثير من المواقع المفيدة .. و القيمة .. و التي تأتي بالجديد المقنع .. لهذا أحببت أن أضع هذا الموضوع عن ملف الروبوتس .. الذي اصبحت المواضيع عنه بالمئات .. واحد يركبه و يقول فيه العجب .. و الآخر لا يركبه و يقول فيه العجب .. إخواني إلى هنا كفى .. ثم كفى .. و أنا آسف إن أطلت في التقديم .. و سأدخل في الموضوع بإذن الله ..
--------------------------------------------
إخواني الكرام و خصوصا الذين يرفضون تركيب ملف الروبوتس .. أقول لكم أن جوجل بنفسه ركب ملف الروبوتس .. فكيف بنا نحن ؟ .. ألا يجب أن نقلد جوجل فيه هذه الخطوة .. و لا تقولوا لي أن جوجل محرك بحث أو أو أو .. لأن ملف الروبوتس الذي يركبه جوجل بسيط و في نفس الوقت مميز و فيه أكثر من عبرة لنا نحن أصحاب المواقع لنقوم بتركيبه ..
و هذا هو الرابط
https://www.google.com/robots.txt

و هنا سوف اقوم بالشرح لكم لتقوموا بالتعديل على الملف
أولا
هذه العبارة تسمح لجميع عناكب محركات البحث بالدخول إلى مواقعكم

كود PHP:


--------------------------------------------
ثانيا
هذه العبارة تمنع العناكب من الدخول لمجلد معين أو ملف معين موجود في مواقعكم أو حتى في الروابط الفرعية
كود PHP:


فمثلا إذا كان موقعك على الصفحة الرئيسية و تريد أن تمنع العناكب من الدخول إلى مجلد الصور
فسوف تضع
كود PHP:


لكن ماذا لو كنت تريد أن تمنع مجلد الصور الخاص بالمنتدى
فسوف تضع
كود PHP:


و أيضا و بنفس الطريقة ستمنع الملفات
فإذا كنت تريد أن تمنع ملف موجود في الرئيسية لموقعك فسوف تضع
كود PHP:


و إذا كان الملف داخل مجلد فرعي مثلا vb فسوف تضع:
كود PHP:


--------------------------------------------
ثالثا
بعدما تنتهي من جمل المنع
سوف تضع في النهاية كلمة sitemap متبوعة براط الخريطة لموقعك أو منتداك
هكذا تماما مثل عمنا جوجل
كود PHP:


أو
ادا كانت لديك خريطة لمنتداك
كود PHP:


و هكذا دواليك
--------------------------------------------
ختاما
و في النهاية ترفع الملف إلى رئيسية موقعك و ليس منتداك بامتداد robots.txt
أتمنى أن أكون قد أفدتكم و لو بالقليل