خواهش می کنم.
اگر در فایل robots.txt دسترسی به فایل یا پوشه های خاصی رو برای ربات ها مسدود کرده اید دقت کنید که مسیر مشخص شده توسط شما با تنظیمات یاست همخوانی داشته باشد.
مثال : مسیر های زیر در فایل robots.txt نباید مسدود شده باشد.
https://yoursitename.ir/downloads/
https://yoursitename.ir/wp-content/uploads/edd/*.jpg