快捷搜索:  seo  404  seoyouhua  长尾关键词  seo aNd 8=8  xxx  as  seo++and+8=8

iis日志分析常见代码

IIS日志的用途就是能够观察搜索引擎的蜘蛛来我们网站的爬取情况,可以更近距离的分析和接触蜘蛛。爬取次数,爬取时间点,爬取高峰期,爬取反应出来的HTTP状态码,为我们带来清晰的分析便利。
 
一、各大搜索引擎的蜘蛛名称:
百度(Baidu)爬虫名称(Baiduspider)
谷歌(Google)爬虫名称(Googlebot)
雅虎(Yahoo)爬虫名称(Yahoo Slurp)
有道(Yodao)蜘蛛名称(YodaoBot)
搜狗(sogou)蜘蛛名称(sogou spider)
MSN的蜘蛛名称:msnbot
 
二、IIS分析:
案例日志:61.135.168.22 - - [11/Jan/2009:04:02:45 +0800] "GET /thread-7303-1-1.html HTTP/1.1" 200 8450 "-" "Baiduspider(+http:-www-baidu-com/search/spider.htm)"
分析:
1、61.135.168.22 是访问了是服务器IP为这个的网站.
2、11/Jan/2009:04:02:45 表示蜘蛛爬行时间
3、GET /thread-7303-1-1.html HTTP,表示蜘蛛抓取了这个页面。
4、200 状态码表示蜘蛛抓取页面成功;404表示蜘蛛抓取页面失败。
5、8450 表示此次抓取了8450个字节
6、Baiduspider(+http:-www-baidu-com/search/spider.htm)表示百度蜘蛛的名称
 
三、基本状态码:
200:请求已经完成,蜘蛛访问页面正常
301:已经移动,永久重定向
302:临时重定向
304:蜘蛛爬取后发现,页面没有修改
305:使用代理
400:请求错误
404:找不到页面
 
四、下载IIS日志文件
如果自己有独立的服务器,在IIS信息服务窗口中,点击要设置的网站的属性,在“网页”选项卡上可以看到“启动日志记录”项,可以设置日志的保存位置、日志的记录格式等等,虚拟主机用户可以通过空间商提供的后台生成IIS日志,如万网中称为“weblog日志下载”。
现在我们已经找到了IIS日志文件,然后把它下载下来,用光年日志分析即可。
光年日志分析工具
操作步骤:
1、新建分析任务
第一步:任务向导
这一步不需要想什么,直接点击“下一步”就好了;
第二步:选择您要分析的日志
首先你得从服务器上面将你要分析的日志下载下来,解压,然后添加该txt文档,下一步;
第三步:设置报告的存储地址,这个自定义就可以了;
最后在弹出的提示你是否现在分析日志的对话框中,点击“是”就可以了;
整套操作相当的简单,一目了然。
2、开始分析任务
在确认分析以后,分析很快,只要1-3秒钟,就会弹出IE浏览器打开的的日志分析结果;
3、查看分析结果

您可能还会对下面的文章感兴趣: