百度蜘蛛会不定期的抓取网站所有页面 有什么规律??

大家都知道做SEO要分析网站日志，要查看百度蜘蛛抓取网站页面的情况。我不知道大家有没有发现一个规律?百度蜘蛛会不定期的抓取网站所有页面的链接，不管是没 有被收录的页面和还是已经被收录的页面，百度蜘蛛都会来抓取，不过有的页面蜘蛛经常来抓，有的页面蜘蛛来的频率却很低，这又是为什么呢?

接下来先向大家介绍几个SEO的重要概念，再来回答上面百度蜘蛛抓取频率的问题

1、关于有效索引的概念：

有效索引意思就是被百度进行有效收录的页面，并参与排名的页面。百度目前在搜索结果中，只展示760个搜索结果，你搜索任何关键词，你的这个页面在这760个页面当中，这就属于有效收录;

2、关于缓存机制的概念:

你会发现，当你在百度搜索某个关键词的时候，在短时间内，搜索结果是不变的，这个就是因为缓存机制的原因。但是过一段时间之后，再去搜索这个关键词，搜索结果会发生一些变化，这个是因为在整个搜索引擎机制中还会涉及缓存淘汰和缓存跟新机制。

3、什么是百度的优质库?普通库?底层库?这里给大家进行详细的说明

网站的页面在百度眼里有四种评分等级，分别为D、C、B、A等级：

D等级：百度蜘蛛爬过该页面，但是不收录这个页面。有2个原因，页面内容质量差，权重低;

C等级：也叫百度底层库，百度收录了该页面，但是基本上不会带来任何流量。怎么判断页面是否进入了百度底层库呢?

出现以下任何一种情况，都属于百度底层库：

(1)、在百度搜索该页面的全标题，搜索结果中不会出现该页面，因为这个页面根本就没有参与排名;

(2)、在百度搜索该页面的URL，点击百度快照进去，发现百度快照没有更新快照日期，直接就进入了该页面，这说明蜘蛛已经很少来抓取这个页面了。

B等级：也叫百度普通库，该页能为网站带来少量流量，页面参与关键词排名。怎么判断页面进入了百度普通库呢?

普通库的判断方法：

(1)、在百度搜索该页面的全标题，在搜索结果的首页会出现该页面，但是搜索该页面的部分标题，该页面就不在首页了;

(2)、在百度搜索该页面的URL，点击百度快照进去，百度快照有更新日期，这说明蜘蛛隔一段时间会来抓取这个页面;

(3)、普通库一般不容易在搜索结果中展示图片。

A等级：也叫百度优质库，这种页面会为网站带来80%流量。如何判断呢?

我们先看一张百度优质库页面和百度普通库页面，在site指令下的不同的表现:

(1)、在百度搜索该页面的全标题，在搜索结果的首页会出现该页面，搜索该页面的部分标题也会在首页出现，如下图：(搜索该页面的部分标题，排在搜索结果首页的第2位)

(2)、在百度搜索该页面的URL，点击百度快照进去，百度快照有更新日期，蜘蛛会经常来抓取这个页面，抓取频率比较高;(7月27日抓取的，现在7-29日，只隔了2天时间)

(3)、优质库页面很容易在搜索结果中展示图片，如果该页面有图片的话，如上图。

明白了这些概念就好办了，我们现在要做的就是建设网站的优质库页面，为网站带来精准流量和转化，这里我给出一个我认为比较合理的建设优质库页面的标准：

(1)根据用户需求，数据分析，建立关键词库;

(2)文章页面字数要求500字以上;

(3)多图，图片清晰，图片文件大小控制在200KB左右，ALT属性和标题主题及上下文相关，图片长宽比为5:3;

(4)根据关键词库来进行创作，原创或者整合编写，每一篇优质库页面一定是花费了编辑的心血编写而成的，这个可以制定相应的KPI制度奖惩内容的创建者;

(5)文章发布会，第一时间使用主动推送工具推送给百度，原创保护。

SEO 终极算法系列的最后总结：我们应该尽量清理网站的底层库页面和长期不收录的没有任何价值和意义的页面，重新创建更多优质的页面，提升优质页面占网站总页面 的比例，这样百度给予网站的评分才会越来越高。外链建设虽然重要，但是应该放在次要位置，建设优质内容才是根本。一切能被搜索到的东西都可以被优化，做好 2点就行了。一是创建更优质的内容，编辑越熟悉了解公司的产品服务越好，与客户接触的越多越好，越了解用户的需求越好;二是把优质内容发布到权重更高的平台。真正的做好这2点，百度排名引流So easy。