مشكوور أخي لك الاحض ذالك
لكن عندما اطلب ملف
http://www.dev4soft.com/robots.txt
ينقلني الى صفحة 404 اخي ثم توجه الى صفحة موقع الاستضافة علما اني غيرة جميع روابط الاخطاء
هل تعمل معي لو وضعة ملف robots.txt في مجلد المنتدى مع تغيير المسار المدون في الملف مثال
CODE
# all robots:
User-agent: *
Disallow: /index.php?page=new_topic
Disallow: /index.php?page=search
Disallow: /index.php?page=pm_send
Disallow: /index.php?page=usercp
Disallow: /index.php?page=pm_list
Disallow: /index.php?page=online
Disallow: /index.php?page=send
Disallow: /index.php?page=misc&sendtofriend=1
Disallow: /index.php?page=member_list
Disallow: /index.php?page=team
Disallow: /index.php?page=download
Disallow: /index.php?page=static
Disallow: /index.php?page=new_reply
Disallow: /index.php?page=report
Disallow: /index.php?page=options
Disallow: /index.php?page=logout
Disallow: /index.php?page=forget
Disallow: /index.php?page=register
Disallow: /index.php?page=print
Disallow: /pbboard.class.php
Disallow: /index.php/index.php
Disallow: /index.php?page=tags&edit=1
Disallow: /index.php?page=misc