分析网站服务器日志有什么意义
的有关信息介绍如下:每一个seoer或者站长都知道网站的服务器日志对网站有着很大的意义,我们可以从网站的服务器日志里面看出很多的情况来,下面大概给大家介绍下从日志里面反映出的6点比有用的意见:
1,可以知道百度蜘蛛对于我们网站的访问次数、停留时间、抓取量等情况
意义:从这些数据我们可以看出蜘蛛的活跃程度、亲和程度、抓取深度等,总访问次数、停留时间、抓取量越高、平均抓取页面、平均停留时间,表明网站越受搜索引擎喜欢。
2,网站的目录抓取统计
意义:通过日志分析我们可以看到网站哪些目录受蜘蛛喜欢、抓取目录深度、重要页面目录抓取状况、无效页面目录抓取状况等。通过对比目录下页面抓取及收录情况,我们可以发现更多问题。对于重要目录,我们需要通过内外调整增加权重及爬取;对于无效页面,在robots.txt中进行屏蔽。
3,页面的抓取情况
意义:在网站日志分析中,我们可以看到具体被蜘蛛爬取的页面。在这些页面中,我们可以分析出蜘蛛爬取了哪些需要被禁止爬取的页面、爬取了哪些无收录价值页面、爬取了哪些重复页面url等,为充分利用蜘蛛资源我们需要将这些地址在robots.txt中禁止爬取。
4,访问状态码
意义:蜘蛛正常来说的访问状态码是200,但是有时出现的状态码如301、404等,出现这些状态码要及时处理,以避免对网站造成坏的影响。
5,抓取时间段
意义:通过分析对比多个单日蜘蛛小时爬取量,我们可以了解到特定蜘蛛对于本网站在特定时间的活跃时段。通过对比周数据,我们可以看到特定蜘蛛在一周中的活跃周期。有利于我们网站的内容更新。
6,蜘蛛的访问IP
意义:可以通过日志分析出蜘蛛访问的ip,来判断网站的态度。