1、什么是抓取诊断工具
* R7 c0 v3 K! S. a0 t+ b( ~4 F, e2 y
抓取诊断工具，可以让站长从百度蜘蛛的视角查看抓取内容，自助诊断百度蜘蛛看到的内容，和预期是否一致。' o8 r" \1 M0 b/ J8 B F
每个站点每月可使用300次，抓取结果只展现百度蜘蛛可见的前200KB内容。
( d1 d4 x4 G4 |# u6 J2、抓取诊断工具能做什么5 R2 t2 P3 k) G, r' Z6 R; ?
1）诊断抓取内容是否符合预期，譬如很多商品详情页面，价格信息是通过JavaScript输出的，对百度蜘蛛不友好，价格信息较难在搜索中应用。问题修正后，可用诊断工具再次抓取检验。$ Q6 W& J1 g$ C" |( n% E$ o
% k5 K/ ~( a' J& G% K; [
5 j6 O! i' c L- z. y/ k4 l: q. g2）诊断网页是否被加了黒链、隐藏文本。网站如果被黑，可能被加上隐藏的链接，这些链可能只在百度抓取时才出现，需要用此抓取工具诊断。0 c; R/ n( _# y, z
2 ?( L/ t4 j& g+ M# n, Y
3）检查网站与百度的连接是否畅通，若是IP信息不一致，可以报错通知百度更新IP。3 `4 w! t# A. Y- |7 M) O( n
0 ?% b% A, ~! p. k, y7 L7 e
+ H$ u' q% K) `% L
4）如果网站有新页面或页面内容有更新，百度蜘蛛较长时间没来访问，可以通过此工具邀请它快速来抓取。
; y3 }( i! y* `. ?5 T
: g. _- s- A) s/ L' U
* Q# v$ Y+ ?6 f3 r Q; S |
发表于 2014-3-17 22:33:19
发表于 2014-3-18 09:47:40