搜索引擎抓取频次多少为宜?
- 日期 : 2018-04-17 14:16:07
搜索引擎抓取频次高低是每个SEOer们很关心的问题,因为他对网站优化公司的网站内容收录和网站关键词排名有着至关重要的关系;那么抓取频次多少为宜呢?搜索引擎抓取频次高低取决于网站类型和网站内容价值,相对而言,抓取频次高的站点说明搜索引擎对你的网站关注度高,同时你的网站内容很受搜索引擎青睐,下面鸿运通小编和大家探讨搜索引擎抓取频次多少为宜的相关问题:
搜索引擎抓取频次多少为宜?
一、什么是搜索引擎的抓取频次?
抓取频次是搜索引擎每天对网站服务器抓取的次数,是搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页文章、图片、视频等内容,然后分文别类建立索引数据库,使访客能在搜索引擎中搜索到网站的网页文章、图片、视频等等内容。倘若搜索引擎对网站的抓取频次过高,就可能造成服务器的不稳定,搜索引擎蜘蛛会根据网站内容更新频率和服务器承受能力等因素自动调节抓取频次。如果搜索引擎抓取频次太低是不利于网站内容收录,你想蜘蛛都不来抓取站点,那怎么可能会有好的收录呢。
二、搜索引擎抓取频次多少才算是正常呢?
搜索引擎抓取频次的多少与网站类型和网站内容价值有很大关系,比如你的网站盈利方式来源于网站流量,那么这样的网站就需要有大量的内容,搜索引擎抓取频次就会很高,有的网站甚至可以高达千万次级。但如果你运营着一个普通企业网站,网站内容更新的频率就比较有限,那么这样的网站对于搜索引擎抓取频次就会低一些,一般有几百、几十甚至几次都算是正常的。
三、搜索引擎抓取频次过高的原因分析:
A.网站内容更新恰遇搜索引擎抓取频次较高的时候;
B.搜索引擎抓取了大量的无效网页,可以用robots屏蔽来处理;
C.企业网站构造不合理,导致爬虫抓取死循环,爬取不畅;
倘若仅仅是偶尔出现了抓取频次过高的现象大家不须要担忧,这有可能是网站更新了大量的内容所致,考察一段时间,一般过几天就会还原正常(正常的概念是与平时抓取的频次差不多)。倘若经常忽高忽低,可以经过企业官网日记看一下搜索引擎爬虫是否爬取了好多无效的链接,倘若有,请先用robots.txt屏蔽(shielding),再去搜索引擎网站管理员平台更新一下robots文件。
四、搜索引擎抓取频次过低的原因分析:
A.长期没有更新网站内容,或是内容更新不规律,内容品质欠佳;
B.新站点一般会进入搜索引擎沙盒期,这期间企业网站抓取频次将会很低,连续优化即可;
C.设置了抓取频次上限,倘若设置了上限请改为自动抓取;
D.没有做好链接提交,新产生的链接记得及时提交给搜索引擎;
在保证网站内容品质的前提下,请尽量不要自己设置抓取频次。最好还是通过搜索引擎依据服务器承受能力和企业官网内容的品质等等因素进行自动调节抓取频次,这样对深圳网站优化会比较友好。