如何识别Baiduspider

上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。

除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。

那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?

可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:

1、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。如何识别Baiduspider

2、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

3、在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

文章为作者独立观点,不代表站长派立场,本文链接:https://zhanzhangpai.com/?p=469

免责声明:本站部分内容来源互联网整理,如有侵权请联系站长删除。站长邮箱:1245911050@qq.com

(0)
上一篇 2022年2月4日 下午2:21
下一篇 2022年2月5日 上午11:15

相关推荐

  • 百度工程师为你总结网站优化常见问题

    前段时间,小编收到部分开发者关于建站相关的提问,于是特地让百度工程师为大家从网站的抓取建设、内容生产、死链处理3个方面总结了开发者经常遇到的问题,看到就是赚到! 一、网站抓取建设 …

    2022年2月18日
  • 百度搜索落地页时间因子规范

    原文标题:百度搜索落地页时间因子规范 原文发布日期:2019-05-07 原文发布平台:百度搜索资源平台 一、前言 落地页时间因子是百度搜索判断网站收录、展示、排序结果的重要参考依…

    2022年7月6日
  • 百度搜索内容时效性解读

    上周五,百度搜索线上公开课如期和大家见面,百度搜索产品经理谢其扬从三个方面:什么是时效性、时效性在百度搜索中的重要性以及如何判断时效性,为开发者们详细解读了时效性的相关内容。 本小…

    2022年12月30日
  • 百度搜索打击盗版网文站点公告

    百度搜索打击盗版网文站点公告 为了加强知识产权保护,维护正版站点的排序权益,百度搜索将在近期以技术手段,对有盗版特征(如笔趣阁)的小说、网文站点进行识别和处置,以给更多优秀站点展现…

    2022年7月15日
  • 谷歌SEO-如何有效地执行摩天楼(Skyscraper)策略

    听说过“摩天大楼技术”并想学习如何成功执行它?那你来对地方了! 2015 年, Brian Dean 透露了他使用的外链构建策略,成功率为 11%。这种策略使其自然流量在 14 天…

    2022年2月8日
  • 如何优化网站长尾关键词?长尾关键词优化方法介绍

    任何一个行业的名称就可看作核心关键词或者主关键词,一般来说这样的关键词都是很热门,优化 难度比较大的。我们就转而对这些词进行有效合理的修饰,这些修饰之后的词一般可称为长尾关键词,需…

    2022年3月15日
  • 搜索常见问题Q&A

    Q1:隔天看快照收录了,但当天没有展现,这是什么原因? A:这种情况是完全有可能的,因为收录有很多条策略,有一些时效性比较强的内容,短时间有收录,过了这一段时间之后,用户对这个内容…

    2022年12月30日
  • 什么是索引?索引和排名的关系?

    本篇文章站长博客为大家介绍什么是索引?索引和排名的关系? 搜索引擎中使用的是倒排索引,有不少朋友并不理解什么叫倒排索引。这里先来介绍一下正向索引。当用户进行查询时,如果对本地文件全…

    2022年2月23日
  • 用户需求判定方式

    一、用户需求是什么呢? 用户需求:对用户有价值的内容或让用户喜欢的内容。 百度多次在公开课和站长学院提到输出有价值的内容给用户,也说明用户需求是衡量一个页面内容价值所在,也影响自身…

    2022年12月29日
  • 如何挖掘关键词?关键词挖掘的原则是什么?

    明确了关键词的分类后,就需要开展关键词的挖掘工作,然后再将关键词根据需求分组和布局到网站中去。关键词挖掘S是EO工作中比较上游的工作,没有定位明确要优化的关键词类别,SEO的很多重…

    2022年3月6日