مشکل با robots.txt

[MAH230 54]

سلام دوستان

کدی که در فایل ربات من هست مثل زیره ولی می گن مشکل اساسی داره!

کدوم خطش نباید باشه که هست؟!

پیشاپیش بابت کمکتون سپاسگذارم

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /comments
Disallow: */trackback
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-admin/admin-ajax.php
Allow: /wp-content/uploads


User-agent: Googlebot
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$

 

[ach1992 10]

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes
Disallow: /wp-content/cache
Allow: /wp-admin/admin-ajax.php
Sitemap: https://example.com/sitemap_index.xml

سلام خدمت شما 

شما تمام کد رو پاک کنید و کد بالا رو داخل فایل قرار بدین. توجه داشته باشید به جای https://example.com/sitemap_index.xml آدرس نقشه سایت خودتون رو بذارید.

و یک مورد دیگ در کدی که شما قرار دادید یک سری از مسیرها برای دسترسی ربات بسته شدند باید از کسی که اینکار رو براتون انجام داده بپرسید که چرا این کار رو انجام داده و اگر دلیل قانع کننده ای داشت شما اون مسیر ها رو ببندید.