北京网站优化心得：分析网站服务器日志对网站

长期以来，人们一直认为小网站的结构很简单，页面数量很少。一般搜索引擎很容易抓取并收录，关键词也不是特别热门，没必要两天查网站日志。但是后来发现并不是这样:网站虽然小，但不代表没有问题，结构简单不代表完全收录，也不代表很容易获得好的排名。

在网站优化中，网站日志记录了服务器的日常动态，尤其是搜索引擎的抓取和抓取动态，通过日志可以清晰的分析出来。看看有多少个304，多少个404，哪些页面被过度抓取，哪些页面没有被抓取，每个页面的平均抓取时间，蜘蛛每次访问网站的抓取深度，蜘蛛每天访问网站的次数等等，就可以直接反映出网站目前存在的问题。

就诊次数的副反应权重

蜘蛛访问网站的次数可以反映网站本身的权重。一般一只蜘蛛每天访问一个小网站的次数在几十次左右。如果高于几十倍，就意味着通过链接爬上网站的次数多了，那么爬上列表的几率会更大，对排名也会有积极的影响。如果你一天访问一两次甚至零次，这个网站是非常危险的。

404页减轻整体重量

每个网站都或多或少有404个错误页面，这是必然的现象。有时候是空本身，有时候是自己网站的设置，有时候是外部网站中的外部链接。一旦在日志中找到，就要马上调整。如果有大量的爬行URL404，需要在网站上创建这样的URL页面，以便有效使用，或者修改robots文件，屏蔽和禁止爬行。大量的404错误会被蜘蛛记录下来，会降低网站的印象，所以会降低网站整体的权重。

根据爬行排名进行调整

在很多网站日志中，我们可以清晰的看到页面抓取排名和URL抓取排名，可以直接反映出网站的哪些部分受到蜘蛛的青睐。如果大量访问css或js文件，页面中这类链接的权重会大大浪费，需要修改robots文件来禁止。看一些网站的日志，可以清楚的看到，那些是过度抓取的，那些重点是少抓取的，这样观察之后就知道自己在做什么，就有了明确的目标。比如我的网站之前，莫名其妙会出现更多的爬行文件夹，但是这些文件夹在网站中并不存在，要及时发现，屏蔽掉。

另外，偶尔会出现一些500、206等状态码，是一些日常小问题造成的，不用太担心。但是如果出现大量集中文件，服务器本身就有问题。另外，尽量不要把压缩文件放在根目录下，让一些别有用心的人去尝试网站的源代码或者备份数据。这也有助于304状态码。这个描述很正常，因为网站没有更新。

定期查看网站日志并不会花费我们太多时间，但是如果我们不一直查看，网站上会出现很多我们不知道的小问题。可能我们做了友情连接，原创内容更新了，外部链接不断发，但是排名一直很慢。所以，这个时候，我们不妨看看你的日志。可能问题就在这里。#p#分页标题#e#