官方说法:只用两步 正确鉴别百度搜索蜘蛛

2021-01-20 15:20


官方说法:只用两步 正确鉴别百度搜索蜘蛛


短视頻,自新闻媒体,达人种草1站服务

常常听到站长们问,百度搜索蜘蛛是甚么?近期百度搜索蜘蛛来的太经常服务器抓爆了,近期百度搜索蜘蛛都不来了如何办,也有许多站点想获得百度搜索蜘蛛的IP段,想把IP添加白名单,但IP不固定不动,大家没法对外发布。

那如何才可以鉴别正确的百度搜索蜘蛛呢?来来来,只需两步,教你正确鉴别百度搜索蜘蛛

1、查询UA,假如UA都不对,能够立即分辨非百度搜索检索的蜘蛛,现阶段对外发布过的UA是:

挪动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (patible; Baiduspider/2.0;+)

PC UA:Mozilla/5.0 (patible; Baiduspider/2.0;+)

新增3D渲染UA:

挪动UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (patible; Baiduspider-render/2.0; +)

PC UA:Mozilla/5.0 (patible;Baiduspider-render/2.0; +)

2、反查IP

站长能够根据DNS反查IP的方法分辨某只spider是不是来自百度搜索检索模块。依据服务平台不一样认证方式不一样,如linux/windows/os3种服务平台下的认证方式各自以下:

1)、在linux服务平台下,您可使用host ip指令反解ip来分辨是不是来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu 或 *.baidu.jp 的文件格式取名,非 *.baidu 或 *.baidu.jp 即为假冒。




扫描二维码分享到微信

在线咨询
联系电话

020-66889888