网站日志大家都很熟悉,当网站出现收录不正常、快照不更新时,我们常会想到查看日志文件,一般虚拟空间通过ftp连接会有一个WebLog的文件夹是专门存放iis日志文件的,没有可以联系空间商开通蜘蛛访问记录,服务器或vps用户可以直接查看iis日志代码,一般在得到蜘蛛文件以后,我们还需用一个工具来查看日志文件,当然你也可以直接打开来看,里面就是一些状态码、ip、时间、页面等等一些信息,我常用的工具就是光年日志分析工具,很实用也很直白,分析日志文件就是为了增加网站收录,劫富济贫,昨天分析了一下公司网站,有些无用目录被蜘蛛不停的爬行就要用到robots来限制蜘蛛爬行,一些被频繁爬行的页面适当的增加一些其他页面的内链,来指引蜘蛛的爬行。
在这就不那么多废话了,关于日志分析的文章网络上多的是,大家可以搜索看看,工具奉上。