如何识别Baiduspider

上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。

除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。

那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?

可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:

1、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。如何识别Baiduspider

2、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

3、在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

文章为作者独立观点,不代表站长派立场,本文链接:https://zhanzhangpai.com/?p=469

免责声明:本站部分内容来源互联网整理,如有侵权请联系站长删除。站长邮箱:1245911050@qq.com

(0)
上一篇 2022年2月4日 下午2:21
下一篇 2022年2月5日 上午11:15

相关推荐

  • robots文件格式

     robots文件往往放置于根目录下,包含一条或更多的记录,这些记录通过空行分开(以CR,CR/NL, or NL作为结束符),每一条记录的格式如下所示:“<fi…

    2022年3月15日
  • 什么是链接农场和内容农场?

    现阶段的搜索引擎算法对网站的内容和链接都很注重,所以为了套取搜索引擎流量的站长和EO人员,就抛弃网站为用户服务的本质,而为搜索引擎制造内容和链接,并发明了盛极一时的链接农场和内容农…

    2022年2月28日
  • HTTPS改造全解析

    HTTPS改造的必要性 网站安全问题其实是触目惊心的,主要表现在以下方面:1、首页会被篡改,非法跳转;2、网站被灌入广告,但收入不归自己网站所有。 HTTPS是公认可有效的防止网站…

    2021年11月5日
  • 谷歌SEO-如何创建对SEO友好的URL(分步指南)

    下面,我们将用一个实例讲解创建优化的URL的简单过程,以及URL其余部分的一些最佳做法。 但首先,让我们确保了解url是如何构造的。 URL的剖析 URL由许多部分组成。 对于SE…

    2022年2月2日
  • 谷歌SEO-如何有效地执行摩天楼(Skyscraper)策略

    听说过“摩天大楼技术”并想学习如何成功执行它?那你来对地方了! 2015 年, Brian Dean 透露了他使用的外链构建策略,成功率为 11%。这种策略使其自然流量在 14 天…

    2022年2月8日
  • 网站内部结构如何优化?内部结构优化包含哪些内容?

    最好的站内结构可以及时的来应对百度频繁的算法。 1、品牌词策略 网站标题中最好有自己的品牌词,这样有助于网站的外链操作。也利于自己的品牌建设和品牌推广。 2、善用权重标签 首页he…

    2022年3月15日
  • 清风算法3.0详情

    算法名称:清风算法3.0算法内容:规范下载行业生态发布时间:2018-10-16原文详情: 为规范下载行业生态、保障百度搜索用户下载体验,百度搜索对外发布《百度搜索下载站质量规范》…

    2021年11月5日
  • 搜索引擎排名处理过程,SEO优化过程中怎么排名?

    百度上为什么会有网站呢?它是怎么抓取的呢?为什么网站又是以那样的形式存在于搜索结果之中呢?那个百度快照是个什么东西?(什么是百度快照)下面笔者就对百度排名的过程简单介绍一下。 1、…

    2022年3月15日
  • 2022年卡塔尔世界杯将至,网站防范被黑公告

    2022年卡塔尔世界杯即将来临,以棋牌类,赌球类,竞猜类等内容为主的黑产猖獗,近日百度搜索发现网站被黑的情况日益严重,故特发此公告提醒各大站长,时刻关注网站安全,做好网站防护工作,…

    2022年12月6日
  • 图片网页优化注意事项?图片网站如何优化?图片页面如何优化?

    除图片垂直搜索引黎外,其实在普通的网页搜索中也会有大量包含“图”的搜索词,如果网站有丰富的优质图片,大可以设计专门的网页优化“水*图”“*图片”“*照片”之类的关键词。这是针对网页…

    2022年3月15日