站长们都应该明白，网站的收录是跟搜索引擎蜘蛛的来访次数有关系的，但是对于搜索引擎的蜘蛛是否喜欢我们的网站，蜘蛛又抓取了哪页页面，我们不知道，我们只能从服务器的访问日志中进行分析搜索引擎返回的状态码来进行分析，这个功能也是非常实用的，它可以正确的告诉我们，蜘蛛抓取了哪些页面，并且喜欢什么样的内容都可以用日志来分析出来，如果网站很多天没有蜘蛛过来，那么就需要你分析下网站哪里出现了问题，是不是没有更新内容或者内容不是蜘蛛喜欢的，下面说说，什么原因会导致蜘蛛不抓取内容。

第一、现在的很多的网站程序都带有网站地图生成的功能，如果你的程序不带的话，可以制作一个HTML静态的网站地图，这样能够加快搜索引擎蜘蛛的爬行效率，给蜘蛛一个绿色通道，以后蜘蛛进入你的网站后，那么就可以走该绿色通道进行抓取内容，而不用进入的你的网站东瞅瞅西看看，浪费蜘蛛抓取时间。

第二、在大型的网站当中，很多的页面都会存有死链接，什么叫死链接，就是该链接指向的页面不存在，而导致了蜘蛛卡死在里面，这个时候就需要我们去设置一个404错误页面，这个页面最好是静态的，然后在静态页面中设置一个首页或者栏目页的链接，这样蜘蛛就不会返回搜索引擎，而是继续在你的网站里面抓取内容。

第三、网站的内部的导出链接不宜过多，因为搜索引擎的蜘蛛有很多种，有的蜘蛛是直接爬取整个页面，如果你的页面上有导出链接，那么蜘蛛就会顺着导出链接，爬出你的网站，这样不利于搜索优化，所以在导出链接上要适当，网站的导出链接最好不要过50，否则，网站的快照要慢了许多，最终影响页面的收录。

第四、对于导入链接，当然是越多越好的，俗称就是外链，外链越多，就说名网站的广泛度高，蜘蛛可以从任何一个地方进入你的网站，如果导入链接足够多，那么秒收也不是不可以的。还有就是导入链接的质量也是有区别的，比如说一大堆垃圾网站的链接，甚至没有一个正规网站的导入链接有效。

以上就是在网站搜索优化中的个人经验，希望对大家有所帮助。（ 版权所有 原创）