1、什么是抓取诊断工具 3 ?0 a X# |' p, E - x1 q: g# R/ N抓取诊断工具,可以让站长从百度蜘蛛的视角查看抓取内容,自助诊断百度蜘蛛看到的内容,和预期是否一致。 % N% r3 A) f8 `* e. P% D3 p+ A每个站点每月可使用300次,抓取结果只展现百度蜘蛛可见的前200KB内容。; c% d! A, t2 q k( f; ` f 2、抓取诊断工具能做什么. B! J! m; V/ n+ h/ ^( k" N
1)诊断抓取内容是否符合预期,譬如很多商品详情页面,价格信息是通过JavaScript输出的,对百度蜘蛛不友好,价格信息较难在搜索中应用。问题修正后,可用诊断工具再次抓取检验。& g( v; A( H3 G+ O) V
6 A6 g9 i+ t* [* J A0 S7 b
' C5 }8 G" H; p. p6 y# I. |2)诊断网页是否被加了黒链、隐藏文本。网站如果被黑,可能被加上隐藏的链接,这些链可能只在百度抓取时才出现,需要用此抓取工具诊断。 4 v. F2 L4 b' A; z/ |9 q1 ?( {: G- z P s E; P# Z
3)检查网站与百度的连接是否畅通,若是IP信息不一致,可以报错通知百度更新IP。" A* L$ o! q* v: I5 F $ ~% b9 k5 }; A0 m1 ^ : `3 k% Z+ V) A& F4)如果网站有新页面或页面内容有更新,百度蜘蛛较长时间没来访问,可以通过此工具邀请它快速来抓取。8 |0 m5 F0 {$ M. r. b( F