خزش ربات هاي گوگل براي سئو

موتور هاي جستجو مانند گوگل به منظور بررسي يك سايت از منظرهاي متفاوت از الگوريتم ها يا ربات هاي خود كه به آنها كراولر ميگويند استفاده مي كنند

كراولر ها اينترنت را مورد بررسي قرار ميدهند و صفحات سايت ها را براي ارزيابي و گروه بندي ايندكس مي كنند. آنها از سايتي به سايت ديگر مي روند و فرايند ايندكس كردن را انجام مي دهند

 

در يك سايت مطالبي وجود دارند كه لازم نيست توسط الگوريتم هاي گوگل ايندكس شوند

و گاهي ايندكس شدن آنها ممكن است به افت رتبه در گوگل بينجامد

پس لازم است بدانيم چطور به الگوريتم هاي گوگل اعلام كنيم كه كدام قسمت هاي سايت مارا مورد آناليز قرار ندهند 

براي اين كار ميتوانيد از فايل robots.txt استفاده كنيد

يكي از فوايد ديگر اين كار به هد ندادن بودجه ي خزش است

بودجه ي خزش به چه معناست؟

بودجه ي خزش اصطلاحيست به معناي نرخ تعيين شده براي مدت زماني كه ربات هاي گوگل ميتوانند سايت ما را مورد پردازش قرار دهند

 اگر به ريات هاي گوگل نگوييم كه كدام قسمت هاي سايتمان را ايندكس نكنند 

بودجه ي خزش سايت خود را هدر داده و موجب ميشويم قسمت هايي از سايتمان را كه به منظور بهبود افزايش رتبه ي سايت بهينه سازي كرده ايم به خوبي مورد بررسي قرار نگيرند

هاست و ارتباط با آن با ايندكس شدن توسط الگوريتم هاي گوگل و بودجه ي خزش:

الگوريتم ها براي بررسي يك سايت به هاست سرور پيام ميفرستند و به نوعي منتظر تاييديه ي هاست ميمانند

يك هاست بر اساس قدرت و سرعت خود ميتواند پاسخ را سريع يا آهسته و با صرف زماني طولاني تر به الگوريتم ها بفرستد

موتور جست و جوري گوگل براي آنكه متوجه شود هاست شما پاسخگوي خوبي در مقابل ربات هايش هست يا نه,دو فاكتور را بررسي ميكند

اول آنكه چه تعداد سايت روي هاست مورد نظر وجود دارند

دوم آنكه هاست شما براي چه تعداد دفعات براي پاسخ گويي به ربات ها دچار مشكل شده

با در نظر گرفتن اين دو گزينه.گوگل گزينه هاي ديگري را در نظر ميگيرد تا تايين كند بودجه ي خزش سايت شما به چه ميزاني بايد باشد

1دفعاتي كه محتواي يك سايت بروز ميشوند

2تعداد صفحاتي كه براي گوگل در يك سايت بهينه سازي شده اند به چه ميزان است

3تعداد بك لينك ها

چگونه ميتوانيم بفهميم گوگل نرخ خزش سايت ما را به چه ميزاني در نظر گرفته است؟

در قسمت گوگل وبمستر و از قسمت Crawl Stats ميتوانيد ببينيد كه گوگل سايت شما را چند بار در روز ايندكس ميكند

چظور ميتوان بودجه ي خزش را افزايش داد؟

لينك هاي بي اهميت سايت خود را حذف كنيد

همواره مطالب خود را بروز كنيد

سعي كنيد با يك هاست خوب و حرفه اي كار كنيد

به درستي از ريدايركت 301 و 302 استفاده كنيد

براي سايت خود توسط افزونه هايي كه وجود دارند نقشه بسازيد

در سايت خود از لينك هاي داخلي به صورت افراطي و بيش از حد استفاده نكنيد

 

با رعايت نكات گفته شده به بهينه سازي سايت خود به منظور بهتر ايندكس شدن كمك كنيد

تا كنون نظري ثبت نشده است
ارسال نظر آزاد است، اما اگر قبلا در رویا بلاگ ثبت نام کرده اید می توانید ابتدا وارد شوید.