1、什么是抓取诊断工具& D, y3 f/ F- N: l% ]
: _0 g& O3 r( @. v: l
抓取诊断工具，可以让站长从百度蜘蛛的视角查看抓取内容，自助诊断百度蜘蛛看到的内容，和预期是否一致。. \4 C" y( Y$ v& ?* B
每个站点每月可使用300次，抓取结果只展现百度蜘蛛可见的前200KB内容。
( l- E' m, e! ]& o% b2、抓取诊断工具能做什么# k7 |) k; I! W* h$ ~6 V" H, ~
1）诊断抓取内容是否符合预期，譬如很多商品详情页面，价格信息是通过JavaScript输出的，对百度蜘蛛不友好，价格信息较难在搜索中应用。问题修正后，可用诊断工具再次抓取检验。
7 Z: X( ?1 S7 w" C
$ C" l& m Y+ A/ S' T6 R1 L/ Y
/ P; c" |* z- o% C
2）诊断网页是否被加了黒链、隐藏文本。网站如果被黑，可能被加上隐藏的链接，这些链可能只在百度抓取时才出现，需要用此抓取工具诊断。 v" g9 x( Y$ W- D
* |/ Q' y) d6 A3）检查网站与百度的连接是否畅通，若是IP信息不一致，可以报错通知百度更新IP。
: I3 Q/ Y; X: E0 [7 g9 u2 J
! f& {9 T( R# q( W& ~" E
1 {3 k1 l6 p, A/ O4）如果网站有新页面或页面内容有更新，百度蜘蛛较长时间没来访问，可以通过此工具邀请它快速来抓取。
, h! u5 w9 F/ p3 j# j
* c& U8 h, ~1 _
" ^! A3 K; S5 I: P6 F# j |
发表于 2014-3-17 22:33:19
发表于 2014-3-18 09:47:40