فایل robots.txt خوب برای سایت

[mohandes1900 1]

سلام دوستان کسی فایل robots.txt خوب برای سایت سراغ داره به ما هم بده؟

واقعا ممنون میشم

[logomaster 171]

در 29 دقیقه قبل، mohandes1900 گفته است :

سلام دوستان کسی فایل robots.txt خوب برای سایت سراغ داره به ما هم بده؟

واقعا ممنون میشم

فایل ربات خوب و بد بستگی به خود شما داره ، هر فایل رباتی مناسب سایت شما نیست.

مثلا این فایل ربات logomaster هستش 

User-agent: *
Disallow: /wp-admin/

بنظرم چیز دیگه ای نیاز نیست برای فایل ربات

[mohandes1900 1]

آخه میگن ربات ها نباید به اطلاعات کش و پلاگین ها دسترسی داشته باشن

آدرس سایتم https://www.fooji.ir هستش

[logomaster 171]

در ۱ ساعت قبل، mohandes1900 گفته است :

آخه میگن ربات ها نباید به اطلاعات کش و پلاگین ها دسترسی داشته باشن

آدرس سایتم https://www.fooji.ir هستش

موضوع سوال شما یکی از بیشترین سوالات مطرح شده بوده

 

ویرایش شده تیر 96 توسط logomaster

[chem 61]

دوستان User-agent: مفهوم چیه؟ بعضی سایت ها دیدم اینجوری تنظیم شده

User-agent: *

و بعضی دیگه در ابتدا این گذاشتند 

User-agent: *

و در آخر این کد:

User-agent: msnbot
Crawl-delay: 5

User-agent: bingbot
Crawl-delay: 5

و این بخش چه مزیت یا معایبی روی سئو داره؟

User-agent: Googlebot-Image
Allow: /

 

همین طور در وبمستر خطای زیر برام ثبت شده که دسترسی به این مسیر بسته شده آیا نیاز هست تا این لینک هم ایندکس بشه

wp-admin/admin-ajax.php

 

ویرایش شده اردیبهشت 97 توسط chem

[نوین ادمین 3860]

شما میتونید از این کد ها استفاده کنید :

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

توضیح اینکه خط اول میگه تمامی روبات ها دسترسی داشته باشن . خط دوم میگه کلا به شاخه wp-admin که مال مدیریته دسترسی نداشته باشن . خط سوم میگه از این شاخه wp-admin این فایل php رو مجزا کن و به ربات دسترسی بده . در انتها هم بهتره سایت مپتون رو قرار بدید .

Sitemap: https://yoursite.com/sitemap.xml

الان گوگل دیگه توانایی تحلیل css و جاوااسکریپت ها رو داره . بنابراین میتونه سایت شما رو دقیقا از دید کاربر ببینه . پس نباید هیچ افزونه و فایلی رو که کاربر میبینه از دید گوگل مخفی کنید یا دسترسی ندید .

حتما یکبار از بخش fetch as google سایت رو بررسی کنید و render کنید . مطمئن بشید گوگل سایت شما رو مطابق چیزی که هست میبینه

[chem 61]

در 9 ساعت قبل، نوین ادمین گفته است :

شما میتونید از این کد ها استفاده کنید :

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

توضیح اینکه خط اول میگه تمامی روبات ها دسترسی داشته باشن . خط دوم میگه کلا به شاخه wp-admin که مال مدیریته دسترسی نداشته باشن . خط سوم میگه از این شاخه wp-admin این فایل php رو مجزا کن و به ربات دسترسی بده . در انتها هم بهتره سایت مپتون رو قرار بدید .

Sitemap: https://yoursite.com/sitemap.xml

الان گوگل دیگه توانایی تحلیل css و جاوااسکریپت ها رو داره . بنابراین میتونه سایت شما رو دقیقا از دید کاربر ببینه . پس نباید هیچ افزونه و فایلی رو که کاربر میبینه از دید گوگل مخفی کنید یا دسترسی ندید .

حتما یکبار از بخش fetch as google سایت رو بررسی کنید و render کنید . مطمئن بشید گوگل سایت شما رو مطابق چیزی که هست میبینه

سپاس از شما

میشه بفرمایید که این آدرس برای کاربر چه کاربردی دارد؟

wp-admin/admin-ajax.php

 

ویرایش شده اردیبهشت 97 توسط chem

[mehran-b 2385]

در 2 ساعت قبل، chem گفته است :

میشه بفرمایید که این آدرس برای کاربر چه کاربردی دارد؟

سلام و درود

 

تمامی درخواست های آژاکس استاندارد وردپرس با استفاده از این فایل هندل میشه.

 

موفق باشید

[mechanicwp 1]

مناسب ترین robots

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Sitemap: http://site.com/sitemap.xml

[chraghi 2]

تاثیر فایل روبوت و مپ برای سئو سایت چیه؟یکی میگفت اگه اینا رو نداشته باشه گوگل سایت رو نمیخونه آیا همچین چیزی درسته ؟