公告:网址大全导航目录www.btv85.com为各位站长提供免费收录网站的服务,VIP会员每天提交网站30、文章30免审核,快审服务(10元/站),可自助充值发布。

点击这里在线咨询客服 点击这里在线咨询客服
新站提交
  • 网站:223084
  • 待审:0
  • 小程序:16453
  • 文章:25974
  • 会员:230

今天BTV导航网的小编为你讲一下搜索引擎蜘蛛爬行网站足迹解读相关的内容。
你把IIS日志从空间下到本地,然后用文本工具打开;

  2010-05-14 15:52:03 W3SVC1 121。187。5。143 GET /category-8-b0-min1100-max2200.html - 80 - 220.181.7.74 Baiduspider+(+baidu/search/spider.htm) 200 0 0

  分析下 200 0 0组成部分 sc-status(协议状态) sc-substatus(协议子状态) sc-win32-status(Win32状态码)

  sc-status(协议状态): 200 连接成功

  sc-substatus(协议子状态) :0 成功

  sc-win32-status(Win32状态码):0 代表抓取成功并带回数据库 ; 64 指定的网络名不再可用

  1: 在这个访问记录里面121.187.5.143是你服务器的IP地址,220.181.7.74 是bd蜘蛛的IP,/category-8-b0-min1100-max2200.html 为蜘蛛访问你的页面 80是端口 GET是打开方式 W3SVC1是记录的文件夹,这里说明,bd蜘蛛已经访问了你的category-8-b0- min1100-max2200.html 这个页面,那么最重要的是最后面的这个参数200 0 0。

  2、200 0 0 成功访问该页面,0代表抓取成功并带回数据库。这个时候你就放心了,这个页面已经被bd收录,但是还没有释放出来,bd更新时就可能释放出来。

  3:200 0 64 网络上流传着这么三种解释第一:64为K站的前兆。第二64的出现只是64位操作系统。第三:网络不可达,由于某种原因无法完全打开页面,或者网络不稳定这些原因,导致蜘蛛无法带回页面或者说不抓取该页面,所以200 0 64的解释也应该为:访问了该页面,但并没有任何抓取也没有带回数据库。这种原因多为空间不稳定、服务器不稳定。

  4:304 0 0这个返回码代表蜘蛛访问的页面没有更新,和他之前来的时候是一样的,所以看到这个不要担心,蜘蛛来过,只不过你没有更新,所以他也不愿意带走这个页面。

  5:404 0 0这个是代表404页面,但是有个很严重的问题,这个返回码告诉我们,蜘蛛来到了404页面并把他带走了,崩溃~~~~,要是这样的话基本上你要倒霉了,要你有太多的404,那么蜘蛛就会不断是抓取,不断的带走,这样会造成无数的重复页面,最终导致K站或者降权,正确的返回骂是404 0 64 这就代表蜘蛛没有抓取你这个页面。

  6:500错误500错误是服务器内部错误,是由程序的错误造成的,我不懂程序,但是500错误是会给你减分的,这点基本的逻辑都可以想的到,要发现500错误,马上查看是哪个页面的,然后去修正以下错误吧!

  7:302要在日志中发现302的返回码也是需要注意的,302为临时重定向,要你是长期的将这个页面重定向到另一个页面,麻烦你使用301永久重定向,要是302的话bd蜘蛛下次来还会访问这个页面,这样又会造成复制大量页面的问题,结果肯定是K,所以,抽空检查以下。

  陈中平的回复:

  每个网络蜘蛛都有自己的名字,在抓取网页的时候,都会向网站标明自己的身份。网络蜘蛛在抓取网页的时候会发送一个请求,这个请求中就有一个字段为User-agent,用于标识此网络蜘蛛的身份。例如Google网络蜘蛛的标识为GoogleBot,Baidu网络蜘蛛的标识为BaiDuSpider,Yahoo网络蜘蛛的标识为Inktomi Slurp。如果在网站上有访问日志记录,网站管理员就能知道,哪些搜索引擎的网络蜘蛛过来过,什么时候过来的,以及读了多少数据等等。

  通过ftp,查看到后台有一个包含“log”的文件。这个文件就是日志。通过查看日志中是否有baiduspider的脚印。有baiduspider就说明bd蜘蛛来过网站。

  小刀SEO 的回复:

  网站日志一般存放在虚拟主机的logfiles文件夹下,可以通过FTP工具将网站日志下载下来,通过txt文档方式查看。

通过对搜索引擎蜘蛛爬行网站足迹解读的详细介绍,希望对你有所帮助,我们提供了更多和搜索引擎蜘蛛爬行网站足迹解读类似的相关内容推荐,可以你更全面的帮助你解决问题。我们BTV85网址导航还提供网址收录服务,你可以注册提交你的网站信息,帮你引导搜索引擎蜘蛛,同时还有网站SEO优化交流微信群,里面很多SEO高手和大咖,加友链,可以免费进群。

搜索引擎蜘蛛爬行网站足迹解读同类内容推荐:
  • chatgpt网站崩了

    因为最近chatGPT太过于火爆,很多用户还没来得及使用就被提示了网站崩溃,很明显是因为使用的用户太多了造成了 2023-02-13

  • 收纳物语蜘蛛奶茶通关攻略

    收纳物语蜘蛛奶茶是一个卸妆关卡,所需要的工具不多,但是玩家需要自己选择顺序。以下是btv85导航网带来的收纳 2022-12-20

  • 金铲铲之战S7星界龙羁绊解读

    金铲铲之战S7星界龙什么效果?S7新赛季即将上线,“星界龙”是新赛季巨龙羁绊之一,此羁绊具体有什么用呢?下面带来 2022-12-13

  • 金铲铲之战S7巴德和佐伊技能解读

    金铲铲之战S7巴德和佐伊怎么样?巴德和佐伊都是S7的五费卡,巴德有三种羁绊,佐伊有两种羁绊效果(还能偷取技能)。下 2022-12-13

  • 崩坏星穹铁道自动机兵蜘蛛X2打法攻略

    崩坏星穹铁道自动机兵蜘蛛X2怎么打?在探索阶段中,前往大矿区地图的时候,会遇到一种精英怪自动机兵蜘蛛X2比较难 2022-12-13

  • 金铲铲之战S7幽影蜘蛛阵容玩法说明

    金铲铲之战S7幽影蜘蛛怎么玩?更新之后“幽影蜘蛛”成为了版本最强上分套路之一,很多高端局大佬们都在使用这套 2022-12-13

  • 机动战姬聚变弗莱怎么玩

    机动战姬聚变弗莱强不强?救援蜘蛛·弗莱是新活动赠送的四星角色,很多玩家想知道她好不好用,是否需要进行培养。 2022-12-12

  • 恭喜WBG.Spider(小蜘蛛)、GG战队夺得NBPL S2单、三排冠军!

    2022《永劫无间》职业联赛第二赛季总决赛于昨日完美落幕,至此,NBPL S2赛季单排、三排冠军已全部产生。其中,来 2022-11-15

  • 异星要塞无尽BOSS机械蜘蛛攻略解析

    异星要塞机械蜘蛛怎么打?机械蜘蛛是无尽模式的Boss之一,它的两个技能伤害都非常高,在攻略过程中要及时躲避才行 2022-11-12

  • 永劫小蜘蛛实则压力怪?NBPL上顶住暗域+喷火双重压力,成功天选

    熟悉《永劫无间》的玩家都知道,在最近,《永劫无间》的国内顶级联赛NBPL的S2赛季总决赛阶段正式开始了,经历过前 2022-11-11

  •   admin

    注册时间:

    网站:0 个   小程序:0 个  文章:0 篇

    • 223084

      网站

    • 16453

      小程序

    • 25974

      文章

    • 230

      会员

    赶快注册账号,推广您的网站吧!
    热门网站
    最新入驻小程序

    小朋友猜谜语2021-05-24

    小朋友猜谜语是一款学习教育类的

    球比分2021-05-24

    球比分是一款体育运动类的小程序

    匠人名片2021-05-24

    匠人名片是一款交友社交类的小程

    知晴2021-05-24

    知晴是一款生活服务类的小程序应

    优惠券查询工具2021-05-24

    优惠券查询工具是一款其他工具类

    成语词典汉字拼音故事大全字典2021-05-24

    成语词典汉字拼音故事大全字典是