سلام و عرض ادب
دوستان من روی یه موضوع اصلی و اساسی موندم
کسی میتونه در این خصوص کمکم کنه
در کنسول گوگل در بخش Excluded مورد به مورد برایم سوال مورد اول حدود 1000 page هست که مشکل ایندکس دارند تو تصویر از کنسول براتون ارسال کردم
تو جزئیات کنسول خوندم دیدم اسم X-robots-tag آورده شده که احتمالا مربوط به ربات تکست میشه رو برخی ادرس ها
اما از طرفی اصلا فایل ربات تکست من محدودیتی نداره ممنون میشم یه راهنمایی جامع و کامل بکنید تو این امر