站长基础交流之怎么查看蜘蛛是否来过_SEO优化_258商务网
推广 热搜: 广州  SEO  贷款  深圳    二手    贵金属  网站建设  机器人 

站长基础交流之怎么查看蜘蛛是否来过

   2017-11-24 00:19:16 互联网258商务网20
核心提示:网站日志大家都很熟悉,当网站出现收录不正常、快照不更新时,我们常会想到查看日志文件,一般虚拟空间通过ftp连接会有一个WebLo
 网站日志大家都很熟悉,当网站出现收录不正常、快照不更新时,我们常会想到查看日志文件,一般虚拟空间通过ftp连接会有一个WebLog的文件夹是专门存放iis日志文件的,没有可以联系空间商开通蜘蛛访问记录,服务器或vps用户可以直接查看iis日志代码,一般在得到蜘蛛文件以后,我们还需用一个工具来查看日志文件,当然你也可以直接打开来看,里面就是一些状态码、ip、时间、页面等等一些信息,我常用的工具就是光年日志分析工具,很实用也很直白,分析日志文件就是为了增加网站收录,劫富济贫,昨天分析了一下公司网站,有些无用目录被蜘蛛不停的爬行就要用到robots来限制蜘蛛爬行,一些被频繁爬行的页面适当的增加一些其他页面的内链,来指引蜘蛛的爬行。
在这就不那么多废话了,关于日志分析的文章网络上多的是,大家可以搜索看看,工具奉上。
 
反对 0举报 0 收藏 0 打赏 0
 
更多>同类资讯
推荐图文
推荐资讯
点击排行

网站首页  |  付款方式  |  关于我们  |  联系方式  |  使用协议  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  RSS订阅  |  违规举报
免责声明:本站所有信息均来自互联网搜集,产品相关信息的真实性准确性均由发布单位及个人负责,请大家仔细辨认!并不代表本站观点,258商务网对此不承担任何相关法律责任!如有信息侵犯了您的权益,请告知,本站将立刻删除。
友情提示:买产品需谨慎
网站资讯与建议:125493959@qq.com 客服QQ:2924917661点击这里给我发消息2924917661点击这里给我发消息