1、什么是抓取诊断工具2 D! D/ W1 l3 S
0 K9 f2 X+ H1 i/ `3 e4 q
抓取诊断工具,可以让站长从百度蜘蛛的视角查看抓取内容,自助诊断百度蜘蛛看到的内容,和预期是否一致。
# H% o4 ?6 h6 E每个站点每月可使用300次,抓取结果只展现百度蜘蛛可见的前200KB内容。
6 G2 H" G6 A+ T) L5 U. |2、抓取诊断工具能做什么* _6 U, ?/ T7 a) {; u0 v; K( D
1)诊断抓取内容是否符合预期,譬如很多商品详情页面,价格信息是通过JavaScript输出的,对百度蜘蛛不友好,价格信息较难在搜索中应用。问题修正后,可用诊断工具再次抓取检验。" p9 |+ T8 h+ u& S; V
; t, U, S2 ]3 J: b; b' f% a
, l3 W& j( q9 w1 Z6 Y' r/ K
2)诊断网页是否被加了黒链、隐藏文本。网站如果被黑,可能被加上隐藏的链接,这些链可能只在百度抓取时才出现,需要用此抓取工具诊断。
: v' m3 P5 N: Q$ N7 Y% A* w5 Y) e% a
3)检查网站与百度的连接是否畅通,若是IP信息不一致,可以报错通知百度更新IP。
( A; o$ u3 ?( I
1 B' z" K. V/ z8 u
- g, K. r& k7 }7 h3 }
4)如果网站有新页面或页面内容有更新,百度蜘蛛较长时间没来访问,可以通过此工具邀请它快速来抓取。
' U1 n1 v5 j$ l5 H
" c* Q) z/ p1 E- d8 s7 g# F8 d7 v5 _! U2 b# E
|