robots.txt not working! - منتدى استراحات زايد

استراحات زايد الصفحة الرئيسية

		منتدى استراحات زايد > استراحات اخرى > منتدى أخبار المواقع والمنتديات العربية والأجنبية
robots.txt not working!

التسجيل

التعليمـــات

المجموعات

:: قهوجي جدة | أفضل خدمات الضيافة وتقديم القهوة 0539307706 (آخر رد :ksa ads) :: تركيب مظلات وجلسات خارجية في الطائف والباحة – مؤسسة مظلات وسواتر الطائف 0556109470 (آخر رد :ksa ads) :: أفضل قهوجي في جدة للمناسبات والحفلات – اتصل الآن 0552137702 (آخر رد :ksa ads) :: أفضل مقاول أسفلت بالدمام – الشرقية – الجبيل | سفلتة ورصف الطرق 0506291462 (آخر رد :ksa ads) :: مظلات سيارات الرياض | أفضل الأسعار والتركيب الفوري مع الضمان 0563866945 (آخر رد :ksa ads) :: مقاول تشطيب وترميم معتمد في الرياض | 0551033861 (آخر رد :ksa ads) :: مواصفات افضل وكيل مولدات كات في مصر (آخر رد :yaseen22) :: العوامل المؤثرة في أسعار مولدات الكهرباء في مصر (آخر رد :yaseen22) :: استخدام التقنيات الحديثة في تنظيف المساجد (آخر رد :roknnagd213) :: مقاول سفلتة مداخل الفلل والمنازل في الجبيل والدمام –0506291462 (آخر رد :ksa ads)

LinkBack

أدوات الموضوع

انواع عرض الموضوع

04-22-2010, 02:10 AM

محروم.كوم

عضو ماسي

بيانات محروم.كوم

رقم العضوية : 503

تاريخ التسجيل : Dec 2007

الجنس : female

علم الدوله : الدوله : United Arab Emirates

المشاركات : 2,100,669

عدد الـنقاط :3341

تقييم المستوى : 2140

robots.txt not working!

My site was suspended yesterday by my shared hosting provider for using too much resources.

So, I am attempting to stop all robots from indexing the site at least temporarily while I work on this.

Right now I have 4 members and like 53 visitors, many of which are Google Spider, Yahoo! Slurp Spider, Turnitin.com Spider and MSNBot Spider.

Just to test this out, I just put the most repressive robots.txt file for the forums that I could think of, which is:

User-agent: *
Disallow: /forum/

(the forum folder is on the root level of my public_html folder, i.e. www.mysite.com/forum).

The robots.txt file is also on the root of the public_html folder.

Yet, I still have all of these robots crawling around the forums!! How do I get them to stop??! This file seems to have no effect whatsoever! Thanks.... __DEFINE_LIKE_SHARE__

إعلانات عشوائية

تعارف بلاك بيري	صور بلاك بيري	قروبات بلاك بيري	اخبار رياضية	العاب فلاش	اهداءات اغاني للهواتف	نغمات جوال
أغاني	مسلسلات رمضان	مسجات	سوق محروم	سيارات للبيع	ارقام سيارات للبيع	برودكاست