|
来源:百度站长平台
8 y/ K, a. v6 S) D, a+ O8 H4 r
+ k8 h7 `4 H/ d: }1 o/ n 摘要:误封过Baiduspider,想把所有BaiduspiderIP放入白名单?发现一只名为Baidu的spider行径可疑,该如何判断?
/ B3 v0 T j9 ~; ~: L* v D0 h; Q3 Z
上周百度站长平台接到某站长求助,表示误封禁了Baiduspider的IP,询问是否有办法获得Baiduspider的所有IP,打算放入白名单加以保护,防止再次误封。在此要告诉各位站长,Baiduspider的IP池是不断变动的,我们无法提供IP全集。1 u1 G* Y- _3 e( x, @. t
. K" @* n: K% f' E$ r
除此之外,之前还有站长发来质疑说Baiduspider光顾过于频繁,已超越服务器承受能力。而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼。
) r, x) `& `: T$ P0 Q# N9 z- v! t# w! I) n+ L9 D# S2 I, C- b8 c# P
那么,站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?$ e/ }5 O' p! E& O2 K
6 u% q! U3 b L& x; Z, q8 V 可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:0 \$ _3 ?# `$ X3 ^
; U9 O# c8 L9 L8 L" R
# @& w6 `7 d/ ? n: y: T7 J 1,在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
3 G: S6 A& A8 a. t8 b, ~* g& ?8 q8 [' ^4 L6 q2 M7 ~
2,在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
. h# E1 M# W- u, g- z; {, J( ?% C" o& `# }" f
3,在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
: X7 B- }5 ?# w( n3 A |
|