1、什么是抓取诊断工具: r" B$ B' J) R6 b
! P6 L+ r1 @. C9 k/ _4 T
抓取诊断工具，可以让站长从百度蜘蛛的视角查看抓取内容，自助诊断百度蜘蛛看到的内容，和预期是否一致。
3 j& B- ~0 M5 s( P每个站点每月可使用300次，抓取结果只展现百度蜘蛛可见的前200KB内容。
# D/ w7 ^& u8 ~8 A6 K/ |2、抓取诊断工具能做什么8 Z- n: f/ r1 u- {* z
1）诊断抓取内容是否符合预期，譬如很多商品详情页面，价格信息是通过JavaScript输出的，对百度蜘蛛不友好，价格信息较难在搜索中应用。问题修正后，可用诊断工具再次抓取检验。
( M- ]; \, P( \
- x6 V: r3 W7 W* V w* I* w m9 h4 f' n2 D) Q+ x X
2）诊断网页是否被加了黒链、隐藏文本。网站如果被黑，可能被加上隐藏的链接，这些链可能只在百度抓取时才出现，需要用此抓取工具诊断。; [' E/ z6 N" X
, T; c# x+ K3 `6 }4 b8 n; U3 x- r* m0 H
3）检查网站与百度的连接是否畅通，若是IP信息不一致，可以报错通知百度更新IP。
5 @0 U" m5 m( t* O0 R2 P0 w
c& i+ R, l, k9 O7 }: Z5 M, s) H _* [* ~% [
4）如果网站有新页面或页面内容有更新，百度蜘蛛较长时间没来访问，可以通过此工具邀请它快速来抓取。
& A6 x( \. Y5 z8 j 7 v! Y# i4 M7 S' f
8 B0 ?4 t6 q" p! C, f% N2 }6 o1 L
|
发表于 2014-3-17 22:33:19
发表于 2014-3-18 09:47:40