現在很多人使用的Blog程序都是WordPress,那麼在做WordPress優化時,有一項比較重要的是robots.txt文件,那麼該如何寫WordPressBlog的robots.txt文件呢?請繼續往下看:
7 F: k$ y9 w# ~! X: C; `, A: U* D0 P0 E& W3 W! ?2 h( F" K
一、最嚴格的寫法,我們採取以下方法:) L# P; }! b+ |) Y3 \ Z' s
User-agent: *+ E t4 t5 _. L
Disallow: /wp-*2 ~1 I* f% f; b t" Z1 ~1 I
#Allow: /wp-content/uploads/ s( @ x9 N4 F# k) l
Disallow: /*.php$
( q9 M2 ]; W) _5 {2 P9 v r- B& w Disallow: /*.inc$0 J, ?3 m% n$ e$ y! z" `/ f
Disallow: /*.js$
7 T' `" a- [6 [, _' W; l Disallow: /*.css$- v0 g8 C7 ^) v. f/ d8 @2 [
Disallow: /?s=
0 |, ?9 E6 D- i* c" c 允許所有蜘蛛訪問,限制訪問以「wp-」開頭的目錄及文件,限制抓取.php文、.inc、.js、.css文件,限制抓取搜索結果。這是許多朋友公認的寫法,下面介紹一下一個另類的寫法:
2 ~5 V% ]! {6 U. S. r; k+ Z8 T! g( Z/ u! F. k
User-agent: *! v$ ]1 v. y7 y4 C6 a
Disallow: /wp-admin
[9 `! U2 C; C/ ?' t0 u Disallow: /wp-content/plugins
" z4 ?( A9 l/ M8 ^# g Disallow: /wp-content/themes
. z# }8 N6 W* u* B: ]/ w+ z% v9 U Disallow: /wp-includes- D2 B- I# O# m+ @0 o5 l; |
Disallow: /?s=
7 F! y% R: T7 p* L4 v: w+ x& U' ? Sitemap: http://www.xxx.com/sitemap.xml,這只是個例子,這裡的地址要換成你的sitemap.xml地址,大家看得出這兩種寫法有什麼不同之處嗎?' @2 U: u( m+ G6 ?" j' ?# e [
" I0 {$ G7 ^/ c7 S8 u( a 4 l k; I+ L: i# j4 v
附sitemap.xml:: S1 y. H# K1 F! k- k
<?xml version="1.0" encoding="UTF-8" ?>
- k/ [ ~' @ L/ M G: J' e- <sitemapindex xmlns="http://www.google.com/schemas/sitemap/0.84">" f# V! ]8 U% O) ~ n+ {3 ]$ G
- <sitemap>
2 o6 p, V, J( q9 K) |2 c1 M <loc>http://www.xxx.com/lanmu.xml</loc>
0 @" D6 |+ C: H5 m8 a9 @+ W <lastmod>2009-09-15</lastmod>
4 N3 v" F9 j- N+ W3 p </sitemap>+ q0 _5 w4 z- g
- <sitemap>
x4 N/ a) E( b' ^6 b( K4 c <loc>http://www.xxx.com/wenzhang.xml</loc>
- G" Q, @6 P6 f' r) i* X* ?8 N$ @/ u <lastmod>2009-09-10</lastmod>
/ U8 I0 l6 k# \6 M, P </sitemap>
7 t$ L! P. ~% {) d( M2 z, U </sitemapindex> |
評分
-
查看全部評分
|