公告:网址大全导航目录www.btv85.com为各位站长提供免费收录网站的服务,VIP会员每天提交网站30、文章30免审核,快审服务(10元/站),可自助充值发布。

点击这里在线咨询客服 点击这里在线咨询客服
新站提交
  • 网站:223084
  • 待审:0
  • 小程序:16453
  • 文章:25726
  • 会员:221

今天BTV导航网的小编为你讲一下识别百度蜘蛛的正确办法相关的内容。

本文给出了识别百度蜘蛛的正确方法,大家在整理完百度蜘蛛以以后,对于那些有疑问的ip可以按照这些方法去查询!网上也有很多“大神”给出的总结,但这些十有八九是不靠谱的,建议大家还是严格按照百度的方法来。另外,不要相信那些所谓的权重蜘蛛、降权蜘蛛等等,这些都是忽悠。

很多朋友提到在分析网站日志的时候,不知道到底哪些才是真正的百度蜘蛛!我们应该怎么去区分呢?这里btv85SEO给出百度官方的答案,大家可以根据这份指南和操作方法去鉴别。

一、查看UA信息

如果UA信息不对,可以直接判断该蜘蛛为非百度搜索的蜘蛛。

目前UA分为移动、PC、和小程序三个应用场景,分别如下:

【移动UA】

1、Mozilla/5.0(Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko)Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

2、Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html) 

【PC UA】

1、Mozilla/5.0(compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

2、Mozilla/5.0(compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

【小程序UA】

Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;Smartapp; +http://www.baidu.com/search/spider.html)

二、双向DNS解析认证

第一步:DNS反查IP

开发者可以对日志中访问服务器的IP地址进行反向DNS查找,判断某只spider是否来自百度搜索引擎,Baiduspider的hostname以*.baidu.com或*.baidu.jp 的格式命名,非*.baidu.com或*.baidu.jp即为冒充。

在Linux/Windows/OS三种平台下,验证方法分别如下:

1) 在Linux平台下,可以使用host IP命令反解IP来判断该抓取是否来自Baiduspider。

2) 在Windows平台或者IBM OS/2平台下,可以使用nslookup IP命令反解IP:打开命令处理器,输入nslookup xxx.xxx.xxx.xxx(IP地址)就能解析IP,判断该抓取是否来自Baiduspider。

3) 在macOS平台下,可以使用dig命令反解IP:打开命令处理器输入dig -x xxx.xxx.xxx.xxx(IP地址)就能解析IP,判断该抓取是否来自Baiduspider。

第二步:对域名运行正向DNS查找

对第一步中通过命令检索到的域名运行正向DNS查找,验证该域名与日志中访问服务器的原始IP地址是否一致,IP地址一致可确认spider来自百度搜索引擎,IP地址不一致即为冒充。

【示例】

> host 111.206.198.69 

69.198.206.111. in-addr.arpa domain name pointer baiduspider-111-206-198-69.crawl.baidu.com. 

>hostbaiduspider-111-206-198-69.crawl.baidu.com 

baiduspider-111-206-198-69.crawl.baidu.com has address 111.206.198.69

以上就是百度官方给出的方法,大家在整理完百度蜘蛛以以后,对于那些有疑问的ip可以按照上述方法去查询!网上也有很多“大神”给出的总结,但这些十有八九是不靠谱的,建议大家还是严格按照百度的方法来。另外,不要相信那些所谓的权重蜘蛛、降权蜘蛛等等,这些都是忽悠。


通过对识别百度蜘蛛的正确办法的详细介绍,希望对你有所帮助,我们提供了更多和识别百度蜘蛛的正确方法类似的相关内容推荐,可以你更全面的帮助你解决问题。我们BTV85网址导航还提供网址收录服务,你可以注册提交你的网站信息,帮你引导搜索引擎蜘蛛,同时还有网站SEO优化交流微信群,里面很多SEO高手和大咖,加友链,可以免费进群。

识别百度蜘蛛的正确办法同类内容推荐:
  • 企业网站公司

    企业网站的重要性 现如今,企业网站已经成为企业运营的重要组成部分,它不仅是公司形象的展示窗口,也是与客户进 2023-08-25

  • 企业网站建设

    企业网站建设的重要性 随着互联网的快速发展,企业网站已经成为企业展示自身形象、宣传产品和服务的重要渠道 2023-08-16

  • 降雨量监测--雨量监测:掌握天空的秘密

    降雨量监测的重要性 降雨量监测是指通过各种观测手段和仪器,定期记录和分析降雨量数据的过程。它是气象学和 2023-08-07

  • 降雨量等级划分--降雨量等级划分:为不同的降雨量设定分类标准

    降雨量等级划分的重要性 降雨量等级划分是气象学中的一个重要概念,它用于按照不同的降雨量水平对降雨事件进 2023-08-07

  • 降雨量报警值--雨量报警值

    预防洪灾,重要性不可忽视 天灾人祸常常给人们的生活和财产带来巨大的损失,而洪水灾害无疑是其中最具破坏性的 2023-08-07

  • 降雨量计算公式图解--降雨量计算公式图解

    降雨量计算公式的重要性与应用 降雨量是气象学中一个重要的指标,用来衡量单位时间和单位面积内的降水量。准 2023-08-07

  • 降雨量分布图最新--全球降雨量分布图最新:了解地球上的降雨现象

    降雨量分布图:揭示地球降雨分布的关键工具 降雨量分布图是一种显示地球各地降雨量分布的图表,它通过颜色或图 2023-08-07

  • 降雨量分类--降水量分类——了解不同降水量的定义和特点

    降水量的重要性 降水是地球上水循环过程中至关重要的组成部分。降水量的分类可以帮助我们更好地理解不同地 2023-08-07

  • 降雨量古诗词

    天地间的降雨艺术 从经典到流传的古诗词 古人笔下的降雨量是一种神秘而美妙的存在。在他们的笔墨之间,雨水 2023-08-07

  • 降雨量等级是怎么划分的--雨水等级划分的标准和方法

    降雨量等级及其意义 降雨量等级是指根据降水量的多少将降水事件划分为不同的等级,以便于对降水情况进行科学 2023-08-07

  •   admin

    注册时间:

    网站:0 个   小程序:0 个  文章:0 篇

    • 223084

      网站

    • 16453

      小程序

    • 25726

      文章

    • 221

      会员

    赶快注册账号,推广您的网站吧!
    热门网站
    最新入驻小程序

    小朋友猜谜语2021-05-24

    小朋友猜谜语是一款学习教育类的

    球比分2021-05-24

    球比分是一款体育运动类的小程序

    匠人名片2021-05-24

    匠人名片是一款交友社交类的小程

    知晴2021-05-24

    知晴是一款生活服务类的小程序应

    优惠券查询工具2021-05-24

    优惠券查询工具是一款其他工具类

    成语词典汉字拼音故事大全字典2021-05-24

    成语词典汉字拼音故事大全字典是