?!DOCTYPE html> 一U读懂网站日志中癑ֺ蜘蛛的访问详?-蜘蛛?高质量蜘蛛池U用
<ins id="bx2qx"><button id="bx2qx"><xmp id="bx2qx"><button id="bx2qx"></button><xmp id="bx2qx"><button id="bx2qx"><button id="bx2qx"></button></button><ins id="bx2qx"><button id="bx2qx"></button></ins><ins id="bx2qx"></ins>
<xmp id="bx2qx"><form id="bx2qx"></form><button id="bx2qx"><form id="bx2qx"><xmp id="bx2qx"><ins id="bx2qx"><form id="bx2qx"><xmp id="bx2qx">
<button id="bx2qx"></button>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form><xmp id="bx2qx">
<xmp id="bx2qx"><form id="bx2qx"></form><xmp id="bx2qx"><form id="bx2qx"></form><xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form>
<xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form><xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><button id="bx2qx"></button><xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form><xmp id="bx2qx"><xmp id="bx2qx"><form id="bx2qx"><form id="bx2qx"></form></form><xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form>
<xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><button id="bx2qx"></button>
?div class="w100 topFixed">
U用癑ֺ蜘蛛?快速增加网站收?提升您的|站排名Q!Q?/div>
当前位置Q?/span>蜘蛛?/a> > 蜘蛛?/a> > 详细面

一U读懂网站日志中癑ֺ蜘蛛的访问详?/h1>

发布日期Q?020-10-25 11:28:15 作者:蜘蛛? ?源:www.994247.com
     先说一下网站日志,是一个文本文Ӟ是由|站服务器端自动生成的,文g的后~名ؓlogQ大随着|站被爬取的ơ数军_。这个文仉面详l记载了|站的访问详情,做ؓ一名合格站长,如果是需要查看访问统计数据,那用#或者百度统计工具就可以了,但是如果你想查看各搜索引擎的蜘蛛是否准时来爬行自q|站Q那p学会自己查看|站日志文g了。下面小~结合网站实例给大家介绍一下分析方法:

     首先利用FTP工具d服务器端Q一般在服务器根目录之下存在一个logs文g夹,q里面装的就是网站日志,当然不同的服务器cdQ日志文件的文g夹名U和我介l的不一P但没关系Q只要认清日志文件的扩展名是log?br />

|站日志分析

q入日志文g夹,你会发现Q日志文件是按每一天的讉K情况Z个文件保存的Q其实这里可以进行设|,让服务器按照规定的间隔时间分割日志文Ӟ一般都是按天来分割Q这样分析比较清楚。而且服务器里面日志的保存也是可以讄的,一般情况下Q可以保存近三天的日志,供自己分析就_了?br /> 下面我们随机下蝲一天的日志文gQ用Windows文本工具打开该日志文Ӟ会看C堆酷g码的字符Q祝文g大小打开速度也不同:


|站日志分析

注意看有背景的这一部分,我用CTRL+F搜烦功能查找baiduspiderQ好吧,Z么要查找baiduspiderQ这里先普及一下关于搜索引擎蜘蛛的一点小知识Q各大搜索引擎的蜘蛛都有名字Q?br />
癑ֺ的叫baiduspider;

360的叫360Spider;

h的叫Googlebot;

微Y的叫bingbot;

搜狐的叫Sogou web spider;

腾讯的叫Sosospider;

因ؓ国内主要是以癑ֺZ化对象,我们来看看关于百度蜘蛛爬行记录的信息分析Q在日志记录中随便找一个百度蜘蛛的信息Q?br />
42.236.10.71 - - [03/Mar/2017:21:28:19 +0800] "GET / HTTP/1.1" 200 34656  "Mozilla/5.0 (Windows NT 6.2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/31.0.1650.63 Safari/537.36 QIHU 360SE; 360Spider"

怎么解读q些信息呢?蜘蛛IP--【访问时间?ldquo;获取路径”HTTP反馈?00 反馈字节?4656 癑ֺ蜘蛛标记?br />
好吧Q这里面获取路径与HTTP反馈值是非常重要的信息,200为正常读取,d?374个字节。我们再分析一条记录:

220.181.51.118 - - [07/Sep/2012:09:54:15 +0800] "GET /product/disp.php?id=93 HTTP/1.1" 301 249 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

认真看获取\径这一,因ؓ我的|站是老域名,原来的主收录的\?product/disp.php?id=93Q百度蜘蛛同L行,l果我的 新网站里肯定不会有这一条信息,׃HTTP反馈?01Q?01代表已移?— h的数据具有新的位|且更改是永久的。其实这对于我来说是一件好事,蜘蛛爬行不通,知道q条收录记录已经失效Q慢慢就会从癑ֺ的收录数据库中删除。现在百度正在审核我的新站点Q一天爬行只?3ơ,也很不错了的?br />
好了Q大家是不是可以举一反三的学会看其它搜烦引擎蜘蛛的爬行记录了呢?下次Q笔者将重点再分享一下HTTP的反馈|大家通过q个反馈值可以获悉自q站的健康状态哦Q非帔R要?br />
        当然Q有朋友会说Z么不利用一些日志查看工P人工手动察看Ҏ费力Q是的,有些不错的工具例如爱站日志分析工Ploghao在线分析工具{等都可以提供更便捷的操作,今天W者所q内Ҏ在用最初的方法教会大家学会察看自q站的日志。希望以上内容能对你有点帮助?br /> 以上是编分nl大家的分析日志的方式方法,其实q不难,你只需操作一遍就能够掌握了?
?

ysmcp.cn癑ֺ蜘蛛池出UCopyright 2019 版权所?

久久人人97超碰超国产
<ins id="bx2qx"><button id="bx2qx"><xmp id="bx2qx"><button id="bx2qx"></button><xmp id="bx2qx"><button id="bx2qx"><button id="bx2qx"></button></button><ins id="bx2qx"><button id="bx2qx"></button></ins><ins id="bx2qx"></ins>
<xmp id="bx2qx"><form id="bx2qx"></form><button id="bx2qx"><form id="bx2qx"><xmp id="bx2qx"><ins id="bx2qx"><form id="bx2qx"><xmp id="bx2qx">
<button id="bx2qx"></button>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form><xmp id="bx2qx">
<xmp id="bx2qx"><form id="bx2qx"></form><xmp id="bx2qx"><form id="bx2qx"></form><xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form>
<xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form><xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><button id="bx2qx"></button><xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form><xmp id="bx2qx"><xmp id="bx2qx"><form id="bx2qx"><form id="bx2qx"></form></form><xmp id="bx2qx"><form id="bx2qx"><button id="bx2qx"></button></form>
<xmp id="bx2qx"><form id="bx2qx"></form>
<xmp id="bx2qx"><button id="bx2qx"></button>