一個正確的robots.txt文件，能讓搜索引擎不抓取網站的某個不想讓蜘蛛抓取的文件，也可以避免大量的複製網頁對網站搜索引擎權重的影響。Robots.txt 協議標準介紹以前也已提到過，也可以訪問robotstxt.org官方網站參考正確的設置方法，但對了一個新手來講，正確設置一個robots.txt文件是一件比較頭痛的事情。不必煩惱，google教你正確設置robots.txt文件。8 I E3 b2 s* [3 ?8 ?7 h. }+ ?
- J1 |; |) ~( Z) T: M
對於一個網站管理者，擁有一個google帳號是非常有用的，google網站管理玩具，全方位的為你診斷網頁，google通過此玩具，為你反饋網站存在的一些問題。至於google網站管理玩具榜大的功能我就不一一介紹，這裡來講一下怎麼利用google網站管理玩具設置一個正確的robots.txt文件。
1 [. F" R0 k! x( G
3 l# ?: }. W. o" r網站管理玩具中玩具下有一個分析robots.txt文件，此欄下google檢查你網站是否有設置robots.txt文件，如果沒有你也可以通過提供的測試robots.txt文件並試用更改功能來設置一個正確的robots.txt文件，把你想要禁止的文件或目錄通過robots.txt格式製作好後，複製到google提供的robots區，然後你可以在robots.txt文件測網址區測試下你剛才寫的robots.txt文件是否正確。此處還提供了移動索引抓取、圖片索引抓取、抓取網以確定AdSense內容、抓取網頁測量AdWords到達網頁的品質等強大的功能。& p" t$ U" x& G; E2 D
- G' h: g; h7 d
4 [4 p3 B* r) g# u# G! S
4 @; {1 w- J4 w" A. g7 b g% S有了googel網站管理玩具，讓你不必煩心robots.txt文件怎麼去寫，寫得正不正確，也避免了寫錯robots而給網站帶來不必要的創傷直接為網站管理者帶來的經濟損失！
7 A3 s) ^* W5 z) M3 G. Z2 i8 i5 }! f8 W
原載：SEO服務網
8 U2 E! T/ ]. y b作者：搜索引擎優化@Dance的網絡天下
, ^, K4 R; `& a- A$ c# B版權所有。轉載時必須以鏈接形式註明作者和原始出處及本聲明- P# Q% ^5 h" T4 B7 y8 `
" P6 Q( s+ m$ g+ f2 f. B3 \0 x& i轉：http://www.hnfree.cn/changsha/post/google-set-up-robots.html |
|
發表於 2007-12-19 07:17:09
提升卡
沉默卡
变色卡