1、什么是抓取诊断工具
8 @2 p, Z V6 Y K! Q% c+ m @% v' V3 b" x, W& V2 R% z
抓取诊断工具,可以让站长从百度蜘蛛的视角查看抓取内容,自助诊断百度蜘蛛看到的内容,和预期是否一致。
( \9 V ?. q O% X每个站点每月可使用300次,抓取结果只展现百度蜘蛛可见的前200KB内容。
2 @' ` f O. Y ^2 \& g( {2、抓取诊断工具能做什么3 Z4 a9 m9 Y# i' p
1)诊断抓取内容是否符合预期,譬如很多商品详情页面,价格信息是通过JavaScript输出的,对百度蜘蛛不友好,价格信息较难在搜索中应用。问题修正后,可用诊断工具再次抓取检验。& m5 t8 l& n- K2 Q) ~% j
8 l4 _/ v4 e9 g; k
2 F6 {2 \! F9 R' W: n9 c+ R3 p2)诊断网页是否被加了黒链、隐藏文本。网站如果被黑,可能被加上隐藏的链接,这些链可能只在百度抓取时才出现,需要用此抓取工具诊断。
2 p1 \% v, I/ V" A* Q
7 l9 O/ m. f* |+ e, \" E p3)检查网站与百度的连接是否畅通,若是IP信息不一致,可以报错通知百度更新IP。* J* g8 |; G" l: \1 A+ c
8 ]$ \, |8 R' P) r8 N# X2 J U5 g6 {3 \; `/ T& F; G4 i( _' c
4)如果网站有新页面或页面内容有更新,百度蜘蛛较长时间没来访问,可以通过此工具邀请它快速来抓取。
. [" i# I* Y0 M, B. R; H5 k! C 5 Y, ?; r: x$ {4 K7 u
7 `3 w' C4 g, _8 j; M- k+ c1 d
|