1、什么是抓取诊断工具: C- J; G( J5 z# d5 C4 d0 v
6 o! p' H; G5 k, k0 Q抓取诊断工具,可以让站长从百度蜘蛛的视角查看抓取内容,自助诊断百度蜘蛛看到的内容,和预期是否一致。
2 b/ V( f. j' }8 S- ~: v每个站点每月可使用300次,抓取结果只展现百度蜘蛛可见的前200KB内容。
1 z$ H6 n; g0 j* ]2、抓取诊断工具能做什么4 |+ v* i' Z/ r6 P1 e+ x1 d
1)诊断抓取内容是否符合预期,譬如很多商品详情页面,价格信息是通过JavaScript输出的,对百度蜘蛛不友好,价格信息较难在搜索中应用。问题修正后,可用诊断工具再次抓取检验。
% o. P, |& p G1 s1 T
& Q c, C$ _! B4 ^9 Y* {3 o
J P4 m. B+ t, B( u
2)诊断网页是否被加了黒链、隐藏文本。网站如果被黑,可能被加上隐藏的链接,这些链可能只在百度抓取时才出现,需要用此抓取工具诊断。
5 U) O8 } N" j/ l# |5 M0 ^4 B
. ^ {& D! M9 A0 b& G N* _0 f3)检查网站与百度的连接是否畅通,若是IP信息不一致,可以报错通知百度更新IP。9 E# A, U! a9 k/ _5 N$ f0 d0 q
$ W8 V, h* P- v
# N% r, a* G/ W* `4)如果网站有新页面或页面内容有更新,百度蜘蛛较长时间没来访问,可以通过此工具邀请它快速来抓取。' c% ^- s/ c: C0 B3 H
# U/ ]" j. k3 D
8 J8 g: d7 u$ L1 X) I! a; z
|