1、什么是抓取诊断工具
1 H- v* ^. X6 |' }/ r& r6 v) Z1 m. k& O/ D1 }* R; d2 u
抓取诊断工具，可以让站长从百度蜘蛛的视角查看抓取内容，自助诊断百度蜘蛛看到的内容，和预期是否一致。, r+ u' y% r* P5 p/ E( \' W
每个站点每月可使用300次，抓取结果只展现百度蜘蛛可见的前200KB内容。
2 R( S; @6 f& N6 {% q2、抓取诊断工具能做什么
+ v) n( n: Y. l& [1）诊断抓取内容是否符合预期，譬如很多商品详情页面，价格信息是通过JavaScript输出的，对百度蜘蛛不友好，价格信息较难在搜索中应用。问题修正后，可用诊断工具再次抓取检验。
, u; L* h: [4 B- j# d' m- ?6 ]
1 W, @6 V6 b- n4 h" h; }
# o; C$ a, l/ c3 O6 ^1 Z- k
2）诊断网页是否被加了黒链、隐藏文本。网站如果被黑，可能被加上隐藏的链接，这些链可能只在百度抓取时才出现，需要用此抓取工具诊断。: `% t! Z$ c' e- l
) p: T( v4 s4 r3）检查网站与百度的连接是否畅通，若是IP信息不一致，可以报错通知百度更新IP。! |% m) f& M+ H5 W8 m) i
6 Z+ u8 h1 p" {- x' ^, [4 `
* j/ E' N. R+ `, O+ [4）如果网站有新页面或页面内容有更新，百度蜘蛛较长时间没来访问，可以通过此工具邀请它快速来抓取。, x* P- ~7 L8 O" U0 j
' W, n6 O; c& \; u: T( M- C3 [! A
. x8 I! z9 u3 x* h |
发表于 2014-3-17 22:33:19
发表于 2014-3-18 09:47:40