如何在日志中查看蜘蛛的访问行为-seo免费培训

  1.网站日志,是服务端全自动转化成的1个文字纪录,详尽记述了网址的浏览详细信息,作为工作员的你,假如是必须查询浏览数据统计,那用51.la或是百度统计 小工具就就行了,可是假如你要查询各百度搜索引擎的蛛蛛是不是按时来爬行运动自身的网址,那还要学好自身查询网站日志文档了。融合人们自身的网址作为1个案例来做1个详细介绍:最先运用FTP小工具登陆服务端,通常在服务器网站根目录之中存有1个logs文件夹名称,这里边装的就是说网站日志,或许不一样的服务器种类,日志文档的文件夹名称与我详细介绍的不同,但没事儿,日志文档的扩展名是log。

  2.随便下载一天的日志文件,用Windows文本工具打开该日志文件,会看到一堆酷似代码的字符,祝文件大小打开速度也不同:注意看有背景的这一小部分,我用CTRL+F搜索功能查找baiduspider,好吧,为什么要查找baiduspider,这里先普及一下关于搜索引擎蜘蛛的一点小知识,各大搜索引擎的蜘蛛都有名字:

  百度的叫baiduspider;

  谷歌的叫Googlebot;

  微软的叫bingbot;

  搜狐的叫Sogou web spider;

  腾讯的叫Sosospider;

  因为国内主要是以百度为优化对象,我们来看看关于百度蜘蛛爬行记录的信息分析,在日志记录中随便找一个百度蜘蛛的信息:125.90.88.96 - - [07/Sep/2012:19:16:21 +0800] "GET / HTTP/1.1" 200 5374 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

  怎么解读这些信息呢?蜘蛛IP--【访问时间】"获取路径"HTTP反馈值200 反馈字节数5357 百度蜘蛛标记。

  好吧,这里面获取路径与HTTP反馈值是非常重要的信息,200为正常读取,读取了5374个字节。我们再分析一条记录:220.181.51.118 - - [07/Sep/2012:09:54:15 +0800] "GET /product/disp.php?id=93 HTTP/1.1" 301 249 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"3.认真看获取路径这一项,因为我的网站是老域名,原来的主人被收录的路径/product/disp.php?id=93,百度蜘蛛同样爬行,结果我的 新网站里肯定不会有这一条信息,由于HTTP反馈了301,而301代表已移动 — 请求的数据具有新的位置且更改是永久的。其实这对于我来说是一件好事,蜘蛛爬行不通,知道这条收录记录已经失效,慢慢就会从百度的收录数据库中删除。现在 百度正在审核我的新站点,一天爬行只有23次,也很不错了的。好啦,大伙儿是否能够 触类旁通的学好看其他百度搜索引擎蛛蛛的爬行运动纪录了呢?到时候,小编将重中之重再共享一下下HTTP的意见反馈值,大伙儿根据这一意见反馈值能够 获知自身网址的身心健康情况哦,十分关键。或许,有盆友要说为何不运用某些系统日志查询小工具,人工服务手动式查看耗时费力,是的,一些非常好的小工具能够 出示更方便快捷的实际操作,今日上述內容致力于用最初中级的方式 教會大伙儿学好查看自身网址的系统日志。


获取更多知识分享
添加导师 微信:JSRJCXCKF 腾讯QQ:19995896

标签: 日志分析

作者头像
无形_seo截拳道创始人

[黑帽SEO截拳道],奉行“轻理论、重实战的理念”采取直截了当的做法,给学员一对一的细心指导。让小白也能快速起飞!

  • 自我介绍:网名[胜一],2012年开始从事SEO优化工作,操作过境内外多个行业和项目,有成有败,但是积累了大量的一线实战经验。结合SEO培训行业的现状,2017年开创“SEO截拳道”理念,为的是让SEO新人能够快速成长、快速变现!我的宗旨是先培养能开车的司机,再把司机培养成汽车工程师!
  • 版权声明:本站原创文章,于2019-09-09,由无形_seo截拳道发表,共 1548个字。
  • 转载请注明:如何在日志中查看蜘蛛的访问行为-seo免费培训
上一篇:高权重值主站的2级文件目录有什么优点-seo黑帽技术
下一篇:黑帽技术资源_黑帽seo通过什么赚钱_seo黑帽菲律宾​

相关推荐

发表评论