現在很多人使用的Blog程序都是WordPress,那麼在做WordPress優化時,有一項比較重要的是robots.txt文件,那麼該如何寫WordPressBlog的robots.txt文件呢?請繼續往下看:$ h! ?3 Q7 i" o9 M8 f
1 ^( I: h2 ~: _: n# [% ^ 一、最嚴格的寫法,我們採取以下方法:3 e* e& _2 t: D+ g
User-agent: *0 n1 k8 b! ~8 c5 v# o
Disallow: /wp-*# a: b: I, R9 _
#Allow: /wp-content/uploads/
+ Y2 y A7 J0 ~, V Disallow: /*.php$ z: ?" d9 h* W
Disallow: /*.inc$- z. }. i* `' h5 e; c9 Z
Disallow: /*.js$
3 C; C- K$ v- W# p* I! w2 v Disallow: /*.css$
7 t8 v, K% a6 c. X+ f- ?* E: l0 C Disallow: /?s=
6 H0 s3 O! M$ m& r! _% g8 ` 允許所有蜘蛛訪問,限制訪問以「wp-」開頭的目錄及文件,限制抓取.php文、.inc、.js、.css文件,限制抓取搜索結果。這是許多朋友公認的寫法,下面介紹一下一個另類的寫法:
7 ~! f$ w' w+ h% S% `$ w" N
( A# q3 p4 u e5 A. P# _2 f( v. F User-agent: *
6 r# u/ W: @6 D* X' R/ C6 N Disallow: /wp-admin
: K4 |) D" u! e- [. e! d0 S \; C Disallow: /wp-content/plugins; n5 H! w7 J* z. }1 L; n4 F
Disallow: /wp-content/themes
7 U! ]+ a. ~$ m. q Disallow: /wp-includes
) G: j! H* Z+ w8 V Disallow: /?s=5 p n+ ^+ I- r6 ~( e: L
Sitemap: http://www.xxx.com/sitemap.xml,這只是個例子,這裡的地址要換成你的sitemap.xml地址,大家看得出這兩種寫法有什麼不同之處嗎?
+ z2 j& S. H- @$ S2 N
$ m2 T1 p3 ]: Y, Y, ^+ B+ k+ w ( e4 S- F# @: P- A3 r, g1 N
附sitemap.xml:0 ]: `4 A9 E3 h% z5 M: S
<?xml version="1.0" encoding="UTF-8" ?> + Z/ y9 L. ~1 t7 n( a" D
- <sitemapindex xmlns="http://www.google.com/schemas/sitemap/0.84">
" E1 v( ^; q& o5 q- <sitemap>
$ r. X: P/ K( F9 h) @ <loc>http://www.xxx.com/lanmu.xml</loc>
9 W0 X) _- p' ?# S. i* A1 ~ <lastmod>2009-09-15</lastmod> " q5 `9 U# i% X& q1 O
</sitemap>" C& i& ^0 j8 E2 ~& z, W
- <sitemap>
u3 i$ f5 @) y" x <loc>http://www.xxx.com/wenzhang.xml</loc> , c' i6 h4 I' Y4 \( A5 j1 |# T
<lastmod>2009-09-10</lastmod>
% z) f& V' d9 t# q \4 D ] </sitemap>
! {- t% X b0 C8 ~1 C- E </sitemapindex> |
評分
-
查看全部評分
|