如何正确识别Baiduspider移动ua

百度站长平台发布公告宣布新版Baiduspider移动ua上线,同时公布了PC版Baiduspider UA,那么该如何正确识别移动UA呢?我们百度站长平台技术专家孙权老师给出了答案:

新版移动UA:
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

PC UA:
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

之前通过“+http://www.baidu.com/search/spider.html”进行识别的网站请注意!您需要修改识别方式,新的正确的识别Baiduspider移动ua的方法如下:
1. 通过关键词“Android”或者“Mobile”来进行识别,判断为移动访问或者抓取。
2. 通过关键词“Baiduspider/2.0”,判断为百度爬虫。

另外需要强调的是,对于robots封禁,如果封禁的agent是Baiduspider,会对PC和移动同时生效。即,无论是PC还是移动Baiduspider,都不会对封禁对象进行抓取。之所以要强调这一点,是发现有些代码适配站点(同一个url,PC ua打开的时候是PC页,移动ua打开的时候是移动页),想通过设置robots的agent封禁达到只让移动Baiduspider抓取的目的,但由于PC和移动Baiduspider的agent都是Baiduspider,这种方法是非常不可取的。

本文作者:站长派,如若转载,请注明出处:https://zhanzhangpai.com/?p=467

免责声明:本站部分内容来源互联网整理,如有侵权请联系站长留言处理。

(0)
上一篇 2022年2月3日 下午2:17
下一篇 2022年2月4日 下午2:21

相关推荐

  • 全球排名前十的域名后缀有哪些?

    全球排名前十的域名后缀有哪些? 域名排名是什么?首先你要知道域名,域名就相当于一个人的人名,别人通过人名可以找到这个人;而互联网通过域名可以轻松访问到网站,而且通过域名很容易记住您…

    2022年3月28日
  • 如何建设网站外链?增加网站外链的方法?

    首先教大家认识一下什么是高质量外链,依据笔者多年的经验来看,高质量外链是指外链网站权重高,站点相关性好,导出链接少……俗话说内容为王,外链为皇,皇又比王重要,可见外链的重要性。而高…

    2022年3月15日
  • 域名是什么意思?主机是什么意思?

    域名是什么意思?主机是什么意思? 什么是主机域名?主机域名是干什么的?很多人说起主机域名,却不知道具体的含义。事实上主机域名是两个词,主机就是虚拟主机,之所以大家经常说它是因为主机…

    2022年4月11日
  • SEO的优势,SEO和SEM优势对比

    1、性价比高 无地域限制,全国搜索均有效;无时间限制,24小时排名在线,且长期有效 2、多平台 主要搜索引擎算法大同小异,优化1个平台多个平台都会有效果 3、流量精准 通过优化目标…

    2022年3月15日
  • 网站keywords优化原则?如何设置网站描述?

    keywords是Head和整个网页SEO的另一个重要的部分,keywords就是一个网站管理者给网站某个页面设定的以便用户通过搜索引擎能搜到本网页的词汇,关键词代表了网站的市场定…

    2022年3月15日
  • 谷歌SEO-如何高效编写完美的元描述?

    元描述是一个 HTML 属性,用于描述页面内容。它可以在搜索结果中以摘录的形式出现在标题标签下方,以提供更多内容。 以下是代码段的外观: <meta name= “descr…

    2022年1月31日
  • 谷歌SEO:2022年你需要的 8 个链接建设工具(免费+付费)

    近十年来,链接建设一直是我最关注的东西。在为 Ahrefs 工作之前,我担任过链接建设顾问,帮助数十个客户构建了数百个链接。 我在这段时间学到的是,你不需要用到所有的链接建设工具。…

    2022年2月9日
  • 什么是智能建站?智能建站系统是干嘛的?智能建站拥有哪些功能?

    什么是智能建站?智能建站系统是干嘛的?智能建站拥有哪些功能? 什么是智能建站系统?智能建系统是干嘛的?它有哪些功能?众所周知,传统的人工建站方式,要综合考虑成本、服务器以及多种因素…

    2022年3月23日
  • 什么是事务类关键词?

    上一篇文章介绍了什么是导航类关键词,本篇文章继续介绍什么是事务类关键词? 事务类关键词指的是用户有明显的购买意向或动作目的而搜索的关键词。比如“乐pad多少钱”“百科语料打包下载”…

    2022年3月4日
  • 关键词出现位置及次数介绍

    URL中出现关键词(英文) 网页标题中出现关键词(1-3个) 关键词标签中出现关键词(1-3个) 描述标签中出现关键词(主关键词重复2次) 内容中自然出现关键词 内容第一段和最后一…

    2022年3月15日