分享网站日志分析（分析日志时候我们该如何分析）

如果出现以下情况，我们就需要分析日志：

1.新建的网站，希望看到蜘蛛来爬取；

2.网站的总收录量总是没有变化，需要了解蜘蛛的活动情况；

3.网站收录减少了，想看看是否是服务器什么的出了问题；

4.网站全部被k或者首页被k，通过日志来了解蜘蛛最近的动作；

在分析日志时候我们该怎么分析呢？

我们可以直观的看到蜘蛛的访问次数，蜘蛛的停留时间，蜘蛛的抓取量，与蜘蛛的返回码，可以根据这些计算得到蜘蛛平局停留时间、平均抓取量、蜘蛛唯一抓取量、蜘蛛重复抓取率。我们知道，蜘蛛的抓取量越大就说明网站页面就越受蜘蛛的欢迎。

所以：

1.抓取量与平均抓取量的提升与下降 可以看出网站的结构情况 蜘蛛总访问量说明网站的规模。

2.平均停留时间说明蜘蛛爬行一个页面花费，减少这个时间无疑对网站有重要意义。

3.唯一抓取量的数据，可以分析出网站是否让蜘蛛不断爬行无效页面 是否浪费很多蜘蛛 从蜘蛛重复率也是同理 重复抓取并不能让收录量提升 而收录量与网站整体权重与排名 和流量有很大关系。

4.蜘蛛抓取间隔时间，这个在日志中可以看到，会从间隔时间的变化分析出网站在服务器端的问题。

5.结合网站流量趋势 蜘蛛爬取趋势图 大幅度减少流量是不正常的 而在不正常的情况下同时间段的蜘蛛爬行也会出现异常 如返回码是否增加 服务器是否稳定等等。

6.网页加载速度的提升会减少蜘蛛平均停留时间 增加平均抓取量。

7.还有一点 搜索引擎在更新时，蜘蛛会出现异常，比如算法更新时，蜘蛛总访问还是不断增加的。