一個正確的robots.txt文件，能讓搜索引擎不抓取網站的某個不想讓蜘蛛抓取的文件，也可以避免大量的複製網頁對網站搜索引擎權重的影響。Robots.txt 協議標準介紹以前也已提到過，也可以訪問robotstxt.org官方網站參考正確的設置方法，但對了一個新手來講，正確設置一個robots.txt文件是一件比較頭痛的事情。不必煩惱，google教你正確設置robots.txt文件。
- t9 ~0 Q5 _, a* E5 u' P! f& Y& i; _
對於一個網站管理者，擁有一個google帳號是非常有用的，google網站管理玩具，全方位的為你診斷網頁，google通過此玩具，為你反饋網站存在的一些問題。至於google網站管理玩具榜大的功能我就不一一介紹，這裡來講一下怎麼利用google網站管理玩具設置一個正確的robots.txt文件。$ @# N `# a8 Y7 J5 O( L
3 @# t3 C+ J9 n) B網站管理玩具中玩具下有一個分析robots.txt文件，此欄下google檢查你網站是否有設置robots.txt文件，如果沒有你也可以通過提供的測試robots.txt文件並試用更改功能來設置一個正確的robots.txt文件，把你想要禁止的文件或目錄通過robots.txt格式製作好後，複製到google提供的robots區，然後你可以在robots.txt文件測網址區測試下你剛才寫的robots.txt文件是否正確。此處還提供了移動索引抓取、圖片索引抓取、抓取網以確定AdSense內容、抓取網頁測量AdWords到達網頁的品質等強大的功能。% h& s, D% {% J. ^3 Y9 G9 l$ j- i3 r
; U! e4 j9 m* b. r2 G2 I! T
# U$ v+ j' w4 t7 n {
9 K) d j6 F+ V有了googel網站管理玩具，讓你不必煩心robots.txt文件怎麼去寫，寫得正不正確，也避免了寫錯robots而給網站帶來不必要的創傷直接為網站管理者帶來的經濟損失！
5 d7 B; [, ]4 S3 ~* y" n' |" I
! x9 d7 M( r6 D原載：SEO服務網
; ]# W' A! W5 A4 d作者：搜索引擎優化@Dance的網絡天下
! ^( L J q; p. \版權所有。轉載時必須以鏈接形式註明作者和原始出處及本聲明1 T: B* m: ^( w& B8 u) S0 K
4 @" B1 k5 O4 W
轉：http://www.hnfree.cn/changsha/post/google-set-up-robots.html |
|
發表於 2007-12-19 07:17:09
提升卡
沉默卡
变色卡