一個正確的robots.txt文件,能讓搜索引擎不抓取網站的某個不想讓蜘蛛抓取的文件,也可以避免大量的複製網頁對網站搜索引擎權重的影響。Robots.txt 協議標準介紹以前也已提到過,也可以訪問robotstxt.org官方網站參考正確的設置方法,但對了一個新手來講,正確設置一個robots.txt文件是一件比較頭痛的事情。不必煩惱,google教你正確設置robots.txt文件。
, e3 S1 I2 g* {0 p5 H" l. p" b: ^0 z1 S" Y" L( d' X, O
對於一個網站管理者,擁有一個google帳號是非常有用的,google網站管理玩具,全方位的為你診斷網頁,google通過此玩具,為你反饋網站存在的一些問題。至於google網站管理玩具榜大的功能我就不一一介紹,這裡來講一下怎麼利用google網站管理玩具設置一個正確的robots.txt文件。/ A* M+ d! G" ]# n
% Q" R* `' q! E3 j
網站管理玩具中玩具下有一個分析robots.txt文件,此欄下google檢查你網站是否有設置robots.txt文件,如果沒有你也可以通過提供的測試robots.txt文件並試用更改功能來設置一個正確的robots.txt文件,把你想要禁止的文件或目錄通過robots.txt格式製作好後,複製到google提供的robots區,然後你可以在robots.txt文件測網址區測試下你剛才寫的robots.txt文件是否正確。此處還提供了移動索引抓取、圖片索引抓取、抓取網以確定AdSense內容、抓取網頁測量AdWords到達網頁的品質等強大的功能。1 t9 }0 k3 z# V- Z
( p* P1 L% V$ t9 o
- z5 [" X1 O9 `- @2 {" ?; K4 y( [. w/ U
有了googel網站管理玩具,讓你不必煩心robots.txt文件怎麼去寫,寫得正不正確,也避免了寫錯robots而給網站帶來不必要的創傷直接為網站管理者帶來的經濟損失! 0 _. G+ X% b$ o/ n# U; U& v
1 v ^, x( S+ R: t# X7 I3 v6 m
原載:SEO服務網
+ P$ {* w+ p5 ^ n0 ^% B6 b作者:搜索引擎優化@Dance的網絡天下% K0 M- V: a" K$ C" w
版權所有。轉載時必須以鏈接形式註明作者和原始出處及本聲明+ N" l* _+ }1 C
$ V' T5 P* F" E( y; s$ f
轉:http://www.hnfree.cn/changsha/post/google-set-up-robots.html |
|