دلايل ايندكس نشدن سايت در گوگل

در شرايطي كه وب سايت يا اين كه كاغذ‌اي ايندكس نشده ميباشد، بيشترين مجرم معمول اين ميباشد كه متا تگ robots در ورقه مستعمل ميباشد سئو در مشهد يا اين كه استعمال نابجا از disallow در فولدر robots.txt گرديده‌است. هر دو متاتگ‌هايي كه در سطح كاغذ و نيز robots.txt مي باشند، دستور كار‌هايي براي ربات‌هاي ايندكس موتور كاوش در باب شيوه واكنش با محتواي برگه يا اين كه سايت شما مي دهند. (Disallow براي خودداري از ايندكس شدن ادرس خاصي از تارنما از فرمان Disallow به كار گيري ميشه)تفاوت اين ميباشد راياپارس كه متاتگ‌هاي robots بر روي كاغذ‌اي غير وابسته اكران داده مي شوند، در حاليكه پوشه robots.txt شيوه نامه‌هايي براي تارنما مجموعاَ ارائه ميدهد. what is seo با اين حالا در پوشه robots.txt، ميتوانيد صفحه ها يا اين كه دايركتوري‌ها را مشخص و معلوم فرماييد و اينكه به چه شكل بايستي ربات‌ها در طول ايندكس شدن با اين نواحي كردار نمايند. در‌پي تحقيق مي كنيم كه چه‌طور از هر مورد به كارگيري كنيم.
 Robots.txtدر شرايطي‌كه مطمئن نيستيد كه آيا تارنما شما از فولدر robots.txt به كارگيري كرده يا اين كه نه، يك طريق بي آلايش براي رسيدگي وجود دارااست. دامنه خويش را در يك مرورگر و در‌پي آن /robots.txt را وارد فرماييد. در اينجا مثالي با استعمال از تارنما آمازون گفته شده ميباشد (https://www.amazon.com/robots.txt).


همينطور كنسول جستجوي گوگل يك ابزار تستر robots.txt مطلوب داراست كه به شما امداد مي‌نمايد ايرادات را در پوشه robots خويش شناسايي فرماييد. همينطور مي توانيد برگه‌‌اي را در وبسايت با استعمال از نوار ذيل آزمايش نمائيد كه آيا فولدر‌هاي robots شما در هيبت رايج آن مسدود كننده ربات گوگل ميباشد يا اين كه نه