hadi41029
ارسالی ها : 63
عضویت : 6 /9 /1394
وضعیت یاهو :
تشکر ها : 76
تشکر شده : 73
5 RE در صورت تمایل به شما کمک می کنم
جمعه 20 آذر 1394 - 20:01

اینم فایل مربوط به ربات سایت
کد:
User-agent: *
Disallow: /page
Disallow: /vote
Disallow: /User/
Disallow: /user/
Disallow: /Polls/
Disallow: /rating/
Disallow: /archive/
Disallow: /Register/
Disallow: /Login/
Disallow: /Quote/
Disallow: /Forum/User/
Disallow: /Forum/Add/
Disallow: /Forum/Tanks/
Disallow: /Forum/Thanks/
Disallow: /Forum/New_Post/
Disallow: /Forum/New/Answer/
Disallow: /include/captcha/
Crawl-delay: 1000
Sitemap: http://www.nextmovie.ir/sitemap/post/images.xml
Sitemap: http://www.nextmovie.ir/sitemap.xml
Sitemap: http://www.nextmovie.ir/sitemap/post.xml
Sitemap: http://www.nextmovie.ir/sitemap/tag.xml
Sitemap: http://www.nextmovie.ir/sitemap/cat.xml
Sitemap: http://www.nextmovie.ir/forum/sitemap.xml
Sitemap: http://nextmovie.ir/sitemap.xml
Sitemap: http://nextmovie.ir/sitemap/post/images.xml
Sitemap: http://nextmovie.ir/sitemap/post.xml
Sitemap: http://nextmovie.ir/sitemap/tag.xml
Sitemap: http://nextmovie.ir/sitemap/cat.xml
Sitemap: http://nextmovie.ir/forum/sitemap.xml


لطفا اگه بلد نیستید کار کنید بهش دست نزنید که از طرف گوگل پنالتی میشید

این فایل به خزنده های گوگل و موتور جستجو گر ها راه ها رو نشون میده
شما عین همین رو کپی/ قبلیهاحذف کنید و اینو بزارید سیو کنید
ادرس ربات بنده http://www.newjok.ir/robots.txt
ادرس فایل ربات اسکینک http://www.skinak.ir/robots.txt
ادرس فایل ربات سیب گراف http://www.sibgraph.ir/robots.txt

یه جایی نوشته
کد:
Crawl-delay: 1000

یعنی ایندکس روزانه یا همون سر زدن روزانه 1000 هست واسه سایت هایی که در روز 10 تا به بالا پست میزارن
اگه شما کم تر میزارین بزاریدش روی 1 یعنی
کد:
Crawl-delay: 1


موفق باشین
وب کاربر ارسال پیام نقل قول تشکر گزارش

1 از hadi41029 به خاطر این مطلب مفید تشکر کرده اند : admin /


پرش به انجمن :