این لینک های بلاک شده در گوگل وب مستر تولز به چه دلیل هستن؟

samaram · شهریور 94

این تصویر رو ببینید لطفا:

من چند وقت پیش ساختار لینک ها رو تغییر دادم. این خطاها مال اونه؟

باید تا ایندکس دوباره صبر کنم؟ نباید در گوگل وب مستر تولز کار دیگه ای انجام بدم؟ فقط منتظر ایندکس دوباره بمونم؟

محمدرضـا · شهریور 94

آدرس سایتتون رو خط زدید !

در صورتی که تغییرات جدید شما در سایت مپ اعمال شده است ؛

بلی بایستی حداقل 1 هفته منتظر اعمال تغییرات باشید .

علی زینلی · شهریور 94

سلام ، فایل robots.txt خودتون رو اینجا قرار بدید ، فراموش نکنید که wp-includes و هیچ چیز دیگه ای نباید بسته بشه توی robots.txt و فایل robots.txt باید به شکل زیر باشه:

User-agent: *
Disallow: /wp-admin/
Sitemap: http://site.com/sitemap.xml

چون در تغییرات گوگل اعلام شده که هیچ فایل js و css نباید دسترسیش قطع شده باشه و شما اینکار رو با robots.txtـتون کردین (تمامی فایل های ربات مربوط به سالیان گذشته کاملاً منقضی شدن و دیگه نباید wp-includes و wp-content به جز uploads رو ببندید)

samaram · مهر 94

سلام ، فایل robots.txt خودتون رو اینجا قرار بدید ، فراموش نکنید که wp-includes و هیچ چیز دیگه ای نباید بسته بشه توی robots.txt و فایل robots.txt باید به شکل زیر باشه:
User-agent: *
Disallow: /wp-admin/
Sitemap: http://site.com/sitemap.xml
چون در تغییرات گوگل اعلام شده که هیچ فایل js و css نباید دسترسیش قطع شده باشه و شما اینکار رو با robots.txtـتون کردین (تمامی فایل های ربات مربوط به سالیان گذشته کاملاً منقضی شدن و دیگه نباید wp-includes و wp-content به جز uploads رو ببندید)

متشکر

الان محتویات فایل robots به این شکله:


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
Sitemap: http://www.mysite.ir/sitemap_index.xml

یعنی همه ی اینا رو پاک کنم و بجاش همون سه خطی که شما فرمودید رو بذارم؟

شهاب · مهر 94

متشکر
الان محتویات فایل robots به این شکله:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
Sitemap: http://www.mysite.ir/sitemap_index.xml
یعنی همه ی اینا رو پاک کنم و بجاش همون سه خطی که شما فرمودید رو بذارم؟

نه نه ! منظور دوستمون پوشه wp-include بود که شما با روبات Disallow کردی.

samaram · مهر 94

ممنون. ببخشید

نه نه ! منظور دوستمون پوشه wp-include بود که شما با روبات Disallow کردی.

ممنون. ببخشید من الان بالاخره نفهمیدم کدوم خط ها رو باید از فایل robits خودم حذف کنم؟

شهاب · مهر 94

اینو دیگه

Disallow: /wp-includes

علی زینلی · مهر 94

نه نه ! منظور دوستمون پوشه wp-include بود که شما با روبات Disallow کردی.

بله پاک کنید مشکلی پیش نمیاد. توی فایلی که شما دارین علاوه بر wp-includes که نباید بسته باشه plugins و themes هم بسته شده ، بقیّه آدرس ها هم بود و نبودشون لزومی نداره ، بستگی به سایت شما داره و متأسفانه ما فکر میکنیم که robots.txt یه چیز پیشفرض باید باشه... با وجود اینکه برعکس ، برای هر سایتی فرق میکنه که چه آدرس هایی باید بسته یا باز باشه ، در کل همون 3 خطی که من دادم کفایت میکنه به صورت پیشفرض و مشکلی پیش نمیاد.

uploader333 · مهر 94

سلام ، فایل robots.txt خودتون رو اینجا قرار بدید ، فراموش نکنید که wp-includes و هیچ چیز دیگه ای نباید بسته بشه توی robots.txt و فایل robots.txt باید به شکل زیر باشه:
User-agent: *
Disallow: /wp-admin/
Sitemap: http://site.com/sitemap.xml
چون در تغییرات گوگل اعلام شده که هیچ فایل js و css نباید دسترسیش قطع شده باشه و شما اینکار رو با robots.txtـتون کردین (تمامی فایل های ربات مربوط به سالیان گذشته کاملاً منقضی شدن و دیگه نباید wp-includes و wp-content به جز uploads رو ببندید)

جناب آقای زینلی واقعا" ممنون بابت توضیح خوبی که دادید من وردی گوگلم از اول اکتبر حدود 40-50 درصد افت کرده الان هم هنوز سایتم داره از فایل های ربات قدیمی استفاده می کنه آیا ممکنه به خاطر این مساله ترافیک گوگل پایین اومده باشه؟

من فایل رباتی که استفاده می کنم اینجا می زارم می شه لطفا" راهنمایی کنید من باید چه تغییری توش بدم؟

#######################################################
#TCJ Robots
# All Bots
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /wp-content/
Disallow:/wp-content/themes
Disallow:/wp-content/upgrade
Disallow:/wp-content/plugins
Disallow:wp-content/cache
Disallow:/wp-content/bps-backup
Disallow:/wp-content/languages
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /wp-
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback/*
Disallow: /*/trackback/$
Disallow: /author
Disallow: /wget/
Disallow: /httpd/
Disallow: /cgi-bin
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /search
Disallow: /feed
Disallow: /feed/
Disallow: /rss
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /useronline/
Disallow: /*?
Disallow: /*.xhtml$
Disallow: /stats*
Disallow: /about/legal-notice/
Disallow: /about/copyright-policy/
Disallow: /about/terms-and-conditions/
Disallow: /docs*
Disallow: /manual*
Disallow: /category/uncategorized*
Disallow: /bargozari
Disallow: /graphic
Disallow: /error_log
Disallow: /php.ini
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Allow: /sitemap.xml.gz$
# Dugg Mirror
User-agent: duggmirror
Disallow: /
# disallow files ending with the following extensions
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.php*
Disallow: /*.gz$
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
#disallow WayBack archiving site
User-agent: ia_archiver
Disallow: /
# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://website.com/sitemap.xml
# END XML-SITEMAP-PLUGIN
#######################################################[/left]

[left]

علی زینلی · مهر 94

جناب آقای زینلی واقعا" ممنون بابت توضیح خوبی که دادید من وردی گوگلم از اول اکتبر حدود 40-50 درصد افت کرده الان هم هنوز سایتم داره از فایل های ربات قدیمی استفاده می کنه آیا ممکنه به خاطر این مساله ترافیک گوگل پایین اومده باشه؟

من فایل رباتی که استفاده می کنم اینجا می زارم می شه لطفا" راهنمایی کنید من باید چه تغییری توش بدم؟


#######################################################
#TCJ Robots
# All Bots
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /wp-content/
Disallow:/wp-content/themes
Disallow:/wp-content/upgrade
Disallow:/wp-content/plugins
Disallow:wp-content/cache
Disallow:/wp-content/bps-backup
Disallow:/wp-content/languages
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /wp-
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback/*
Disallow: /*/trackback/$
Disallow: /author
Disallow: /wget/
Disallow: /httpd/
Disallow: /cgi-bin
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /search
Disallow: /feed
Disallow: /feed/
Disallow: /rss
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /useronline/
Disallow: /*?
Disallow: /*.xhtml$
Disallow: /stats*
Disallow: /about/legal-notice/
Disallow: /about/copyright-policy/
Disallow: /about/terms-and-conditions/
Disallow: /docs*
Disallow: /manual*
Disallow: /category/uncategorized*
Disallow: /bargozari
Disallow: /graphic
Disallow: /error_log
Disallow: /php.ini
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Allow: /sitemap.xml.gz$
# Dugg Mirror
User-agent: duggmirror
Disallow: /
# disallow files ending with the following extensions
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.php*
Disallow: /*.gz$
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
#disallow WayBack archiving site
User-agent: ia_archiver
Disallow: /
# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://website.com/sitemap.xml
# END XML-SITEMAP-PLUGIN
#######################################################[/left]
[left]

ببینید بعضی ها فکر میکنند که هرچقدر شما سایتتون robots.txt بلند تری داشته باشن سایتشون موفّق تر خواهد بود ، ولی بر خلاف این نظریه نگاه کنید مثلاً سایت دانلود ها که سئو شده فایل رباتش چقدره؟

http://downloadha.com/robots.txt

یا سایت راسخون (که البتّه با وردپرس نیست) فقط allow داده:

https://rasekhoon.net/robots.txt

یا p30download تنها و تنها صفحات سرچ و کوئری استرینگ دارش (صفحاتی که اطلّاعات رو از طریق متود get میفرستن ، مثل صفحات جستجو که با s= هستند یا صفحات ریدایرکت که با go= هستند) و فایل های دانلودیش رو بسته:

http://p30download.com/robots.txt

_______________

ببینید من یه بار دیگه هم گفتم گوگل که بیکار نیست بیاد بعد آدرس شما هرآدرسی رو بذاره و اون رو بخواد ایندکس کنه ، برای اینکه گوگل یه صفحه ای رو ببینه اوّل باید بهش معرفی بشه! بعدش هم صفحه ای که خالیه آخه چطوری گوگل میخواد ایندکسش کنه که دسترسی هاش رو میبندین؟ :|

توی فایل ربات شما فایل های CSS و JS هم بسته هستن که باعث خطای گوگل میشه (Blocked Resources) و ممکنه اگر تعداد این ریسورس ها بالا بره گوگل حساس بشه در پایان ، برای سایت شما نتیجه مضر داشته باشه.

uploader333 · مهر 94

ببینید بعضی ها فکر میکنند که هرچقدر شما سایتتون robots.txt بلند تری داشته باشن سایتشون موفّق تر خواهد بود ، ولی بر خلاف این نظریه نگاه کنید مثلاً سایت دانلود ها که سئو شده فایل رباتش چقدره؟
http://downloadha.com/robots.txt
یا سایت راسخون (که البتّه با وردپرس نیست) فقط allow داده:
https://rasekhoon.net/robots.txt
یا p30download تنها و تنها صفحات سرچ و کوئری استرینگ دارش (صفحاتی که اطلّاعات رو از طریق متود get میفرستن ، مثل صفحات جستجو که با s= هستند یا صفحات ریدایرکت که با go= هستند) و فایل های دانلودیش رو بسته:
http://p30download.com/robots.txt
_______________
ببینید من یه بار دیگه هم گفتم گوگل که بیکار نیست بیاد بعد آدرس شما هرآدرسی رو بذاره و اون رو بخواد ایندکس کنه ، برای اینکه گوگل یه صفحه ای رو ببینه اوّل باید بهش معرفی بشه! بعدش هم صفحه ای که خالیه آخه چطوری گوگل میخواد ایندکسش کنه که دسترسی هاش رو میبندین؟ :|
توی فایل ربات شما فایل های CSS و JS هم بسته هستن که باعث خطای گوگل میشه (Blocked Resources) و ممکنه اگر تعداد این ریسورس ها بالا بره گوگل حساس بشه در پایان ، برای سایت شما نتیجه مضر داشته باشه.

ممنون بابت توضیحتون

همون فایل رباتی را که اینجا معرفی کرده بودید گذاشتم رو سایت ..

uploader333 · مهر 94

ببینید بعضی ها فکر میکنند که هرچقدر شما سایتتون robots.txt بلند تری داشته باشن سایتشون موفّق تر خواهد بود ، ولی بر خلاف این نظریه نگاه کنید مثلاً سایت دانلود ها که سئو شده فایل رباتش چقدره؟
http://downloadha.com/robots.txt
یا سایت راسخون (که البتّه با وردپرس نیست) فقط allow داده:
https://rasekhoon.net/robots.txt
یا p30download تنها و تنها صفحات سرچ و کوئری استرینگ دارش (صفحاتی که اطلّاعات رو از طریق متود get میفرستن ، مثل صفحات جستجو که با s= هستند یا صفحات ریدایرکت که با go= هستند) و فایل های دانلودیش رو بسته:
http://p30download.com/robots.txt
_______________
ببینید من یه بار دیگه هم گفتم گوگل که بیکار نیست بیاد بعد آدرس شما هرآدرسی رو بذاره و اون رو بخواد ایندکس کنه ، برای اینکه گوگل یه صفحه ای رو ببینه اوّل باید بهش معرفی بشه! بعدش هم صفحه ای که خالیه آخه چطوری گوگل میخواد ایندکسش کنه که دسترسی هاش رو میبندین؟ :|
توی فایل ربات شما فایل های CSS و JS هم بسته هستن که باعث خطای گوگل میشه (Blocked Resources) و ممکنه اگر تعداد این ریسورس ها بالا بره گوگل حساس بشه در پایان ، برای سایت شما نتیجه مضر داشته باشه.

من توصیه های خود گوگل را می خونم می بینم تا الان عجب اشتباهی می کردم ... انصافا" این راهنماییتون خیلی به درد من خورد

گوگل مرتب تو جاهای مختلف در مورد در دسترس بود فایل های CSS و JS توصیه کرده

فقط سوالی که دارم در مورد بنر های تبلیغاتی و popunder روی سایته آیا باید اینها را توی robot.txt مسدود کرد؟

خود گوگل تو این لینک تو قسمت technical guidelines یک چیزهایی گفته

https://support.google.com/webmasters/answer/35769?hl=en#3

اگر لازمه که تبلیغات بسته بشن با چه دستوری باید این کار را بکنیم؟

ورود

این لینک های بلاک شده در گوگل وب مستر تولز به چه دلیل هستن؟

پست های پیشنهاد شده

samaram 0

لینک به ارسال

محمدرضـا 388

لینک به ارسال

علی زینلی 2114

لینک به ارسال

samaram 0

لینک به ارسال

شهاب 283

لینک به ارسال

samaram 0

لینک به ارسال

شهاب 283

لینک به ارسال

علی زینلی 2114

لینک به ارسال

uploader333 16

لینک به ارسال

علی زینلی 2114

لینک به ارسال

uploader333 16

لینک به ارسال

uploader333 16

لینک به ارسال

لطفا برای ارسال دیدگاه وارد شوید

فهرست بخش ها

فعالیت ها