آموزش Robots.txt برای بهبود نرخ خزش گوگل

1
بودجه خزش اون میزان اعتباری هست که موتور جستجو به سایت شما داره و باید کاری کنید که این اعتبار توسط صفحات بی اهمیت هدر نره و بیشتر روی صفحات مهم شما باقی بمونه ، به کمک فایل robots.txt شما میتوانید خیلی از صفحات اضافی را از گوگل بخواهید که در سایت شما ایندکس نکنه

 

در ویدئو زیر روش بستن صفحات بی اهمیت در سایت به کمک قایل robots.txt را توضیح دادم:

 

 


بستن آدرس فید سایت:

User-agent: googlebot

Disallow: /feed

Disallow: /blog/feed 


بستن سرچ :

Disallow: /search

 

 

همچنین ببینید:
بررسی رتبه کلمه کلیدی در گوگل با 5 ابزار رایگان
ممکن است شما دوست داشته باشید
1 نظر
  1. جعفر می گوید

    عالی بود

ارسال یک پاسخ

آدرس ایمیل شما منتشر نخواهد شد.

این سایت توسط reCAPTCHA و گوگل محافظت می‌شود حریم خصوصی و شرایط استفاده از خدمات اعمال.