蜘蛛来到网站是功德，可是通过蜘蛛拜候记实我却发现了很年夜的一个问题，往往蜘蛛来到网站之后抓取了4,5个页面就分开了，这是怎么一回事呢?相信很多站长都感触感染到从6月份的事件之后，百度蜘蛛很不稳定吧，我的网站也是一样，从6月份事后蜘蛛每次来了抓取几个页面就走了，这样网站的收录也一直没有提升上去，最后我对网站进行了一次年夜查抄，然后对网站的链接进行了整理，还别说，颠末整理后的网站，蜘蛛每次来抓取的页面达到了20、30，下面我来分享一下我的查抄体例与整治体例。

我感觉蜘蛛刚起头不深入的原因第一种多是导航链接没有设置对，蜘蛛不克不及够通过导航链接进入你网站的深处，那么它怎么去抓取内容页面呢?第二种多是蜘蛛遇到了死链接，搜索引擎蜘蛛准备抓取下一个页面的时候却无法爬行，那么网站的死链接就成了罪魁罪魁，逼百度蜘蛛分开网站。第三种可能就是长时间的不更新站点内容也会致使百度蜘蛛厌烦。

第一、重新设置网站导航链接

网站的导航链接是用户的指导线，也是搜索引擎蜘蛛的指引线，杰出的导航线路能够帮忙搜索引擎蜘蛛从网站的首页逐步的贯穿网站的整个页面，这样就要求我们在设立网站导航的时候要一层层的设立，下面我来谈谈设置导航链接的几点要求：

1、导航链接要就近原则，我们在设置导航链接的时候不要将搜索引擎蜘蛛看得太深奥了，其实他就是一个抓取的东西，而最容易抓取的是什么，就是最近的事物。因此我们在操纵导航链接的时候可以通过导航链接导入下一层栏目链接，而下一层栏目链接才导入内容页面，这就是一层层的导入体例。

2、导入的URL不要太复杂，我感觉网站的URL地址可以设置简单一些，就用一款PHP的法度，目录设置简单一些，那么蜘蛛在爬行抓取的时候也相对容易一些。

第2、死链接必须清理，留下就是祸害

死链接对网站的阻碍作用很是年夜，稍不注意死链接就有可能对网站产生致命的影响，查抄死链接可以操纵chinaz中的东西，而清理死链接就相对坚苦一些了。现在我清理网站死链接的体例是通过游览器FTP中的搜索功能，先在查询东西中将死链接的地址进行复制，复制之后再通过游览器FTP的查找功能，找到它在哪个文件之中，最后在进行删除，很多站长会说我这个别例很麻烦，可是我想说这个别例确实最有效的体例，那些清理死链接的东西我也用过，年夜多都是假的，底子就无法完成清理工作。

第三、文章内容链接进行公道布局

我们在网站的文章内容之中也不要忘记了链接布局这种形式，在进行常规性的文章更新工作的时候我们可以将文章中的关头词作一个链接指向，指向其它的文章内容页面或网站的栏目页面，这样搜索引擎蜘蛛在抓取了这篇文章内容之后就会向下一篇文章内容进行抓取，这也间接性的提高了搜索引擎蜘蛛抓取的页面进度与力度，年夜家可以想一下，一个中心汇出来了无数的点，蜘蛛能不欢畅吗?这代表他能够吃到的食物更丰富，这也是我们在进行文章内容页面链接布局的关头点。

通过前面的三种体例让网站的布局显现递进化的趋势，通过层层引入、蜘蛛抓取的体例让网站的收登科得极年夜的提高，有时候搜索引擎蜘蛛其实不是不想抓取你的网站，而是你的网站垃圾太多了，每隔一周查抄网站的链接也是很有需要的，这也是提高搜索引擎抓取力度的一个因素。本文来历于上海租车.sqzlsh，转载请保存作者链接，谢谢。