أهلا وسهلا بك زائرنا الكريم في منتدى دعم PBBoard الرسمي، لكي تتمكن من المشاركة ومشاهدة جميع أقسام المنتدى وكافة الميزات ، يجب عليك إنشاء حساب جديد بالتسجيل بالضغط هنا أو تسجيل الدخول اضغط هنا إذا كنت عضواً .

رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث

السلام عليكم // جائتني رسالة من الاستضافة الي فهمت من عندها انه المشكلة الي تصير عندي في استهلاك موارد النظام هي زواحف محركات البحث ونصحنوني بالذهاب


موضوع مغلق


04-06-2013 02:07 صباحاً
معلومات الكاتب ▼
تاريخ الإنضمام : 29-08-2011
رقم العضوية : 1756
المشاركات : 220
الجنس :
قوة السمعة : 258
موقعي : زيارة موقعي
السلام عليكم // جائتني رسالة من الاستضافة الي فهمت من عندها انه المشكلة الي تصير عندي في استهلاك موارد النظام هي زواحف محركات البحث ونصحنوني بالذهاب
الى لوحة التحكم في google و bing وتقليل مستوي الزحف وقمت بتقليل مستوى الزحف لكن لااعرف ماهو الحل المتبقي
ياريت لو تنصحوني بالحلول وهذه الرسالة
It seems that most of the issue on the account is caused by crawlers.
Total number of unique IP addresses: 10109
Total number of requests: 419755
Total number of unique request strings: 60012
Total number of unique referers: 12700
Total number of unique user agents: 1829
Total bandwidth sent in responses: 5G [6197229300B]
Top 10 requesting IP Addresses based on count:
COUNT: 36081 / 08.60% IP: 66.249.73.183 HOST: crawl-66-249-73-183.googlebot.com
COUNT: 11974 / 02.85% IP: 157.55.33.17 HOST: msnbot-157-55-33-17.search.msn.com
COUNT: 8041 / 01.92% IP: 157.55.32.104 HOST: msnbot-157-55-32-104.search.msn.com
COUNT: 7065 / 01.68% IP: 157.55.32.154 HOST: msnbot-157-55-32-154.search.msn.com
COUNT: 5348 / 01.27% IP: 157.56.93.84 HOST: msnbot-157-56-93-84.search.msn.com
COUNT: 3952 / 00.94% IP: 109.205.118.6 HOST: Unknown Host
COUNT: 2309 / 00.55% IP: 86.111.146.66 HOST: Unknown Host
COUNT: 1741 / 00.41% IP: 37.238.16.170 HOST: Unknown Host
COUNT: 1729 / 00.41% IP: 5.10.226.85 HOST: Unknown Host
COUNT: 1543 / 00.37% IP: 66.249.81.4 HOST: google-proxy-66-249-81-4.google.com
Top 10 Web Crawlers:
Count: 33021 / 07.87% Crawler: bingbot
Count: 32493 / 07.74% Crawler: googlebot
Count: 5954 / 01.42% Crawler: baiduspider
Count: 944 / 00.22% Crawler: msnbot
Count: 6 / 00.00% Crawler: yandexbot

We recommended setting the crawl rate as slow as possible during peak traffic times (mid-day), and only slightly higher during off-peak hours. Changing the crawl rate does not effect how Bing views your site, how often it is crawled, or how deeply your site is crawled. Reducing the crawl rate will not effect your search engine results, it will simply slow down the rate that Bing crawls your site, and as a result will cause less stress on the

NON BING/GOOGLE*************** We recommend that you limit the crawl rates for all bots or disable crawl access. To manage non (Google/BING) bot crawler rates
, you must create a robots.txt for each domain and insert the following lines in the file: User-agent: * Crawl-delay: 15

look/images/icons/i1.gif [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث
  04-06-2013 05:14 صباحاً   [1]
معلومات الكاتب ▼
تاريخ الإنضمام : 18-07-2009
رقم العضوية : 1
المشاركات : 12526
الدولة : KSA
الجنس :
الدعوات : 52
قوة السمعة : 73776
موقعي : زيارة موقعي
لتقليل وقت زحف عناكب البحث بعدد الثواني من خلال ملف : robots.txt الموجود بداخل مجلد منتداك
بالبحث عن :
CODE
User-agent: *

وأضافة أسفلها
CODE
Crawl-delay: 120


--------------------------
ولمنع زحف الربوتات التي طرحتها في ملف robots.txt ايضاً
ضع أعلى
CODE
User-agent: *

هذه الأوامر
CODE
User-agent: bingbot
Disallow: /
User-agent: googlebot
Disallow: /
User-agent: baiduspider
Disallow: /
User-agent: msnbot
Disallow: /
User-agent: yandexbot
Disallow: /
User-agent: search.msn.com
Disallow: /




مواضيع تفيدك
[مجابه] ممكن شرح طريقة التحكم في وقت دخول العناكب Spiders
شرح لملف robots.txt + محتوى الملف ﻷشهر المواقع العالمية
عناكب عناكبYahoo! Slurp دمرت موقعي
ما هو ملف robots.txt ؟ كيف يتم انشاؤه ؟

look/images/icons/i1.gif [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث
  04-06-2013 06:29 صباحاً   [2]
معلومات الكاتب ▼
تاريخ الإنضمام : 29-08-2011
رقم العضوية : 1756
المشاركات : 220
الجنس :
قوة السمعة : 258
موقعي : زيارة موقعي
شكرا لك اخي لكن ملاحظة بالنسبة لملف robots.txt الافتراضي داخل المنتدى لا يوجد
CODE
 User-agent *  

بل يوجد
CODE
 User-agent: Googlebot


وعدلتها بنفسي ليصبح الملف :

CODE


User-agent: bingbot
Disallow: /
User-agent: googlebot
Disallow: /
User-agent: baiduspider
Disallow: /
User-agent: msnbot
Disallow: /
User-agent: yandexbot
Disallow: /
User-agent: search.msn.com
Disallow: /
User-agent: *
Crawl-delay: 120
Disallow: index.php?page=new_topic
Disallow: index.php?page=search
Disallow: index.php?page=pm_send
Disallow: index.php?page=usercp
Disallow: index.php?page=pm_list
Disallow: index.php?page=online
Disallow: index.php?page=send
Disallow: index.php?page=misc&sendtofriend=1
Disallow: index.php?page=member_list
Disallow: index.php?page=team
Disallow: index.php?page=download
Disallow: index.php?page=static
Disallow: index.php?page=new_reply
Disallow: index.php?page=report
Disallow: index.php?page=options
Disallow: index.php?page=logout
Disallow: index.php?page=forget
Disallow: index.php?page=register
Disallow: /look/images/avatar/
Disallow: /admin.php
Disallow: /pbboard.class.php
Disallow: /lang/
Disallow: /engine/
Disallow: /admin/
Disallow: /includes
Disallow: /look/
Disallow: /modules/
Disallow: /common.php/
Disallow: /admincp/

Sitemap: index.php?page=sitemap&subject=1
Sitemap: sitemap.xml




لو عندك ملاحظة ياريت تنبهني


تم تحرير المشاركة بواسطة :المدرس بتاريخ:04-06-2013 06:33 صباحاً


look/images/icons/i1.gif [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث
  05-06-2013 02:36 صباحاً   [3]
معلومات الكاتب ▼
تاريخ الإنضمام : 27-11-2012
رقم العضوية : 2642
المشاركات : 3231
الدولة : morocco
الجنس :
تاريخ الميلاد : 1-1-1987
الدعوات : 6
قوة السمعة : 18750
أظن أخي أنك لازم تستبدل الرقم 120 برقم أكبر

يعني أنت تطلب من محرك البحث أنه يزور منتداك كل 120 ثانيه وهذا ماراح يفيدك في شيء والله أعلم


تم تحرير المشاركة بواسطة :Mr King بتاريخ:05-06-2013 02:37 صباحاً


look/images/icons/i1.gif [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث
  09-06-2013 12:45 صباحاً   [4]
معلومات الكاتب ▼
تاريخ الإنضمام : 29-08-2011
رقم العضوية : 1756
المشاركات : 220
الجنس :
قوة السمعة : 258
موقعي : زيارة موقعي
شكرا مستر كنك سوت الوقت

وخليت الكود هذا .. وصار اجسن ماكو اي توقفات

CODE

User-agent: bingbot
Disallow: /

User-agent: baiduspider
Disallow: /

User-agent: msnbot
Disallow: /

User-agent: yandexbot
Disallow: /

User-agent: search.msn.com
Disallow: /

User-agent: *
Crawl-delay: 150
Disallow: /pb/index.php?page=new_topic
Disallow: /pb/index.php?page=search
Disallow: /pb/index.php?page=pm_send
Disallow: /pb/index.php?page=usercp
Disallow: /pb/index.php?page=pm_list
Disallow: /pb/index.php?page=online
Disallow: /pb/index.php?page=send
Disallow: /pb/index.php?page=misc&sendtofriend=1
Disallow: /pb/index.php?page=member_list
Disallow: /pb/index.php?page=team
Disallow: /pb/index.php?page=download
Disallow: /pb/index.php?page=static
Disallow: /pb/index.php?page=new_reply
Disallow: /pb/index.php?page=report
Disallow: /pb/index.php?page=options
Disallow: /pb/index.php?page=logout
Disallow: /pb/index.php?page=forget
Disallow: /pb/index.php?page=register
Disallow: /pb/look/images/avatar/
Disallow: /pb/moeiraq.class.php
Disallow: /pb/admin.php
Disallow: /pb/moeiraq.class.php
Disallow: /pb/lang/
Disallow: /pb/engine/
Disallow: /pb/admin/
Disallow: /pb/includes/
Disallow: /pb/look/
Disallow: /pb/modules/
Disallow: /pb/common.php/
Disallow: /pb/admincp/orums/look/
Sitemap: http://www.moeiraq.com/pb/sitemap.xml
Sitemap: http://www.moeiraq.com/pb/index.php?page=sitemap&subject=1

look/images/icons/i1.gif [مجابه] رسالة جديدة من الاستضافة بخصوص زواحف محركات البحث
  09-06-2013 11:49 مساءً   [5]
معلومات الكاتب ▼
تاريخ الإنضمام : 23-07-2010
رقم العضوية : 599
المشاركات : 3734
الدولة : أمي اليمن
الجنس :
تاريخ الميلاد : 4-3-1987
الدعوات : 1
قوة السمعة : 8237
موقعي : زيارة موقعي
العضو غائب بلاكهرباء حتى اشعار آخر ,والمعذرة على الغياب المتكررلأسباب وظروف ولله الحمد , دعواتكم لبلادي وبلاد المسلمين ..
السلام عليكم ورحمة الله وبركاته ،،

تم غلق الموضوع لأحد الأسباب التالية:
  1. تم حل المشكلة والحمدلله.
  2. بقاء الموضوع لمدة 3 أيام بدون الرد عليه أو وجود إشارة تدل على رجوع العضو إليه.
  3. لا يوجد حل لهذه المشكلة (إذا وجد الحل سوف يتم إعادة فتح الموضوع).
عزيزي العضو حرصا على عدم تداخل المواضيع ببعضها وبالتالي صعوبة إستخدام عملية البحث بالنسبة للأعضاء قررت إدارة المنتديات بإغلاق المواضيع التي تتوافق مع الأسباب السابقة. بإمكانك بدأ موضوع جديد أو مراسلة أحد المشرفين إن كنت متأكد من رغبتك في الإستمرار . إدارة المنتديات،،



المواضيع المتشابهه
عنوان الموضوع الكاتب الردود الزوار آخر رد
تغيير مكان عبارة رسالة جديدة و رسالة مقروءة يونس
3 1101 يونس
رسالة تظهر عند إضافة خاصية إشرافية جديدة فى الإشراف المتعدد maxprof
2 833 maxprof
[مجابه] رسالة خطأ عند ترقية النسخة الجديدة waalrd
4 1017 waalrd
نافذة لديك رسالة جديدة PhpMax
3 969 PhpMax

الكلمات الدلالية
لا يوجد كلمات دلالية ..









الساعة الآن 11:44 PM