1、什么是抓取诊断工具1 W" V+ W+ u$ M8 d4 v
3 S+ G% Q$ p" j
抓取诊断工具，可以让站长从百度蜘蛛的视角查看抓取内容，自助诊断百度蜘蛛看到的内容，和预期是否一致。, C1 @/ f, a+ d* u( u/ _5 F) ?6 Z: L
每个站点每月可使用300次，抓取结果只展现百度蜘蛛可见的前200KB内容。2 P2 Y& s# F- w! }3 T3 }
2、抓取诊断工具能做什么
2 H- q8 a9 `$ z. g7 X4 c4 E1）诊断抓取内容是否符合预期，譬如很多商品详情页面，价格信息是通过JavaScript输出的，对百度蜘蛛不友好，价格信息较难在搜索中应用。问题修正后，可用诊断工具再次抓取检验。
1 V5 G* r+ V* C( \' V# ]
8 p4 V0 D5 I& |- m j" ]
( [! U) q1 S! s, t# f( b* _4 Q2）诊断网页是否被加了黒链、隐藏文本。网站如果被黑，可能被加上隐藏的链接，这些链可能只在百度抓取时才出现，需要用此抓取工具诊断。
0 Z7 K/ q5 m+ n* M. D/ E% {7 A% n% q/ f5 V
3）检查网站与百度的连接是否畅通，若是IP信息不一致，可以报错通知百度更新IP。8 t5 \% M8 o$ ~5 S) c
' H. U: X" \9 k0 u! D" W
" N7 e& h- i7 L, R+ K& R, ]9 ^4）如果网站有新页面或页面内容有更新，百度蜘蛛较长时间没来访问，可以通过此工具邀请它快速来抓取。$ N% w$ h2 C* U7 Y6 B
8 g/ m+ `0 g- z* `) g. s2 ]2 ?* N. Z/ d' c3 `4 j( f( I. N9 p* i
|
发表于 2014-3-17 22:33:19
发表于 2014-3-18 09:47:40