1、什么是抓取诊断工具
/ N t- [8 U2 \+ w; T( M* N, Z/ p, }/ P& F
抓取诊断工具,可以让站长从百度蜘蛛的视角查看抓取内容,自助诊断百度蜘蛛看到的内容,和预期是否一致。
! i+ v; P1 }' A7 W4 y+ N/ E+ ~* r每个站点每月可使用300次,抓取结果只展现百度蜘蛛可见的前200KB内容。
+ _; O3 G/ r8 n# O# S0 `* X Z2、抓取诊断工具能做什么/ J4 l+ N, ?8 O
1)诊断抓取内容是否符合预期,譬如很多商品详情页面,价格信息是通过JavaScript输出的,对百度蜘蛛不友好,价格信息较难在搜索中应用。问题修正后,可用诊断工具再次抓取检验。
8 G* g T; C, ^3 H
4 z; R3 Q6 K8 d# q! j
1 c; M, n, U. f \+ T2)诊断网页是否被加了黒链、隐藏文本。网站如果被黑,可能被加上隐藏的链接,这些链可能只在百度抓取时才出现,需要用此抓取工具诊断。
/ B1 K9 f. v* S4 a S* j$ v/ ]; |4 z; `; y* A* w
3)检查网站与百度的连接是否畅通,若是IP信息不一致,可以报错通知百度更新IP。
" G& R, M$ I+ v+ G
5 ~6 J) Z; j+ w4 _
2 g; s3 D2 \5 H# H7 o4)如果网站有新页面或页面内容有更新,百度蜘蛛较长时间没来访问,可以通过此工具邀请它快速来抓取。
+ y: S& }. [) l1 v- Q; g, \: f
$ r R- C, Z2 [) z4 J! E3 Q$ U. S" F G6 \ K6 h0 v
|