只需两步,恰当鉴别百度搜索搜索引擎蜘蛛

摘要: 常常听见网站站长们问,百度搜索搜索引擎蜘蛛是啥?近期百度搜索搜索引擎蜘蛛来的太经常网络服务器抓爆了,近期百度搜索搜索引擎蜘蛛也不来啦如何办,也有许多站点想要百度搜...

常常听见网站站长们问,百度搜索搜索引擎蜘蛛是啥?近期百度搜索搜索引擎蜘蛛来的太经常网络服务器抓爆了,近期百度搜索搜索引擎蜘蛛也不来啦如何办,也有许多站点想要百度搜索搜索引擎蜘蛛的IP段,想把IP添加授权管理,但IP不固定不动,大家没法对外开放发布。 那如何才可以鉴别恰当的百度搜索搜索引擎蜘蛛呢?来来来,只需两步,教你恰当鉴别百度搜索搜索引擎蜘蛛 1、查询UA,假如UA也不对,能够立即分辨非百度搜索检索的搜索引擎蜘蛛,现阶段对外开放发布过的UA是: 移动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+)
PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+) 增加3D渲染UA: 移动UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +) PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +) 2、反查IP 网站站长能够根据DNS反查IP的方法分辨某只spider是不是来源于百度搜索检索模块。依据服务平台不一样认证方式不一样,如linux/windows/os三种服务平台下的认证方式各自以下: 1)、在linux服务平台下,您可使用host ip指令反解ip来分辨是不是来源于Baiduspider的爬取。Baiduspider的hostname以 *. 或 *.baidu.jp 的文件格式取名,非 *. 或 *.baidu.jp 即是假冒。 2)、在windows服务平台或是IBM OS/2服务平台下,您可使用nslookup ip指令反解ip来 分辨是不是来源于Baiduspider的爬取。开启指令解决器 键入nslookup xxx.xxx.xxx.xxx(IP地 址)就可以分析ip, 来分辨是不是来源于Baiduspider的爬取,Baiduspider的hostname以*. 或*.baidu.jp 的文件格式取名,非 *. 或 *.baidu.jp 即是假冒。 3)、 在mac os服务平台下,您可使用dig 指令反解ip来 分辨是不是来源于Baiduspider的爬取。开启指令解决器 键入dig xxx.xxx.xxx.xxx(IP地 址)就可以分析ip, 来分辨是不是来源于Baiduspider的爬取,Baiduspider的hostname以 *. 或*.baidu.jp 的文件格式取名,非 *. 或 *.baidu.jp 即是假冒。


联系我们

全国服务热线:4000-399-000 公司邮箱:343111187@qq.com

  工作日 9:00-18:00

关注我们

官网公众号

官网公众号

Copyright?2020 广州凡科互联网科技股份有限公司 版权所有 粤ICP备10235580号 客服热线 18720358503

技术支持:公众号抽奖