如何分析网站日志,分析网站日志可以获得哪些信息?对于一个seo工作者,尤其是大型网站的SEO工作者来说,每天独立分析网站博客是一项必备的技能。因为大型网站的栏目结构和页面都非常复杂,蜘蛛会频繁访问,从蜘蛛留下的一些痕迹中可以控制很多网站信息,这对于网站优化和运营是非常必要的参考,之前大赛的文章也是如此。
通过分析网站日志可以获得的信息摘要
首先,你可以看到哪些搜索引擎抓取了网站页面。
从网站日志中可以看到哪些蜘蛛抓取了网站,每种类型的蜘蛛也属于自己的专用头部。各大搜索引擎的标题特征如下:
baiduspider:百度蜘蛛
谷歌:谷歌机器人
30蜘蛛:360蜘蛛
搜搜蜘蛛:搜搜蜘蛛
雅虎:& ldquo雅虎!Slurp China & rdquo或者雅虎!
蜘蛛:优道机器人,优道机器人
搜狗:搜狗新闻蜘蛛
蜘蛛:msnbot,MSN bot-媒体
蜘蛛:冰机器人
提醒:网站的日志里也可能有一些其他私人开发的爬虫,所以我们可能会发现一些奇怪的蜘蛛爬行痕迹。另外,百度也有自己的匿名蜘蛛,要注意区分。
第二,可以统计一下网站目录蜘蛛抓取的总量。
通过对抓取总量的分析,可以发现网站上哪个目录更受搜索引擎关注。一般来说,蜘蛛抓取越频繁,这个目录在站点网站上的排名就会越高。我们还可以通过目录的蜘蛛访问来适当调整目录的结构。对于那些压力很大但又不是很重要的目录,我们也可以适当降低链接入口,以免妨碍其他重要目录的抓取。
第三,网站页面的抓取。
从中可以看出一个页面蜘蛛是抓取了一些没有收录的页面,还是重复抓取了这些页面等等。类似地,有必要采取措施频繁地关闭它们,要么使用nofollow标签,要么使用robots文件,等等。,以减少因搜索引擎抓取大量相关性低或质量差的页面而影响页面权重传递的不利影响。
第四,蜘蛛抓取页面的平均次数,页面的平均停留时间,抓取次数。
(1),平均每次抓取的页面数=总抓取量/访问次数。
(2)、单页捕捉停留时间
(3)、平均页面停留时间=总停留时间/访问次数。
从上面的分析可以清楚的看出蜘蛛是否频繁关注自己的网站,抓取的页面越多越深,这也可以反映出网站的活跃度很高,而网站的页面和文章是否新颖或原创,可以在停留时间上面初步看出,这是页面质量的一个反映。
5.你可以看到蜘蛛每个网页的状态码。
状态码是网站日志最重要的方面,是蜘蛛对网站页面状态最直观的反映。从这些状态代码中可以看到更详细的信息。大赛前面有一篇文章对各种蜘蛛状态码做了非常详细的介绍。
六。找出网站日志蜘蛛的访问时间。
通过分析总结网站的日常日志,可以直观的看到每天哪个时间段是蜘蛛访问的高峰期。为了迎合搜索引擎,我们也可以相应的调整网站的更新时间,争取在蜘蛛活跃度最高的时间段更新文章,对自己网站的收录会有很大的帮助,甚至可能达到二次收录的效果!
总之,分析网站日志是一项非常有意义的技能,尤其是在网站建立和运营的初期,这方面更是至关重要。当然,信息量大的时候,一只手看着也不好。这里推荐光年先生的日志分析工具,非常强大,基本可以满足一般网站的分析需求。
本文地址:SEO优化频道http://hkm168.com/seo/429.html,典睿网络SEO公司提供一站式SEO优化服务:SEO优化、网站优化、关键词排名优化、SEO顾问诊断、SEO培训、网站建设、竞价托管、全网营销推广(全网品牌推广)、百科词条创建与修改、新媒体引流、公司负面公关处理等另外,本站原创文章,转载本文请保留本站地址,谢谢!
本文来自投稿,不代表重蔚自留地立场,如若转载,请注明出处https://www.cwhello.com/89657.html
如有侵犯您的合法权益请发邮件951076433@qq.com联系删除