过期域名预定抢注

 找回密碼
 免费注册

求助貼 我這樣寫robots.txt 對嗎?(wordpress)

[複製鏈接]
發表於 2010-2-2 10:05:35 | 顯示全部樓層 |閱讀模式
我用的是wordpress 我把wordpress目錄放在了跟目錄下 我樣像寫對嗎?
3 m7 m6 |' H0 M# o我的主頁被google收錄了,怎麼連我做的那個破flash 都收錄了,但其他文章頁面一個也沒收錄,是不是跟我寫的robots.txt這個文件有問題
% c" O3 u7 U" A3 h; Q) W謝謝,
* u6 i7 O0 u5 Z$ Q+ z4 uUser-agent: *
. e/ G6 V' {9 L# ]: z+ Q* e- \+ \9 YDisallow: /cgi-bin( T8 W8 ?/ t6 V
Disallow: /wordpress/wp-
$ x) [- S, Y& D# m, {# ~2 zDisallow: /wordpress/feed/& h( @7 r6 f, J5 g9 a, Z
Disallow: /wordpress/comments/feed
! g4 q: n1 V7 n3 s7 P. f( ?Disallow: /wordpress/trackback6 }  w8 ?" V- ?, o
Disallow: /wordpress/comments
% c7 n- b: D2 l, G# U5 m1 G( nSitemap: http://sfood.net/wordpress/sitemap.xml
* `4 Y7 B; n( G! O% gSitemap: http://sfood.net/wordpress/sitemap.xml.gz
發表於 2010-2-2 10:32:23 | 顯示全部樓層
本帖最後由 sockpuppet 於 2010-2-2 10:39 編輯
; K: C. ?+ }/ {4 ]( @
+ l5 e* U' l% N7 M( _/ B8 D; {我喜歡加個wild char
5 q2 o& H. K& h* u* C像這樣0 I" g+ z6 b3 C( [8 P
Disallow: /wordpress/wp-*7 g4 Q" o, T) t& `# k- Q6 `. p
Disallow: /wordpress/feed/*& w& |7 ^6 Z( j% P9 k
. P# j3 M- D+ v7 z
看樣子你還得加個+ A" A, F3 h8 e& }5 B
/images/*) t" B6 L+ G  Y% M' Y

0 ~3 S% U) u. W: W/ E) w* google可以辨別出來,其他的我就不知道了
" H  K6 `) K/ u4 G( H- k
; E% M9 ?& I) w6 [一點補充:+ i2 \. ]$ b2 Q4 ~
我個人的
# P1 J" q: L  p$ {& D( ?; |, QDisallow: /*/feed/$- g$ [  P% T* j$ q8 a# B% _# ]3 \
Disallow: /*/feed/rss/$; ?* H- v4 E- H* S$ K. g4 R
Disallow: /*/trackback/$
. G( E& @, u) A7 B4 S/ L. |Disallow: /wp-content/** p( O% {( y: n: e8 o8 A/ y
Disallow: /wp-admin/*9 l9 ~3 t  x" g3 Y6 d: v4 l
Disallow: /wp-includes/*
3 W5 N9 _" o5 Q9 YDisallow: /trackback/*) v2 ]7 u% L# O5 J; M( L
Disallow: /feed/*
( f6 {7 l, B; ~: TDisallow: /comments/*
$ Z, o2 v/ i; g8 X! hDisallow: /page/*2 ]- F: ~6 r% N$ U+ x  _+ `, u: Y+ d
Disallow: /date/*
- E! ~8 [4 F8 u5 B7 A( pDisallow: /archive/*
+ k6 \$ \9 ~. c. T$ u/ c7 x  QDisallow: /rss/*( M9 r. o+ R9 q! w) Y% \- g6 E
& v9 Z: @5 Y* A& h
這對於duplicate content有作用。
* Z  K* Y- l) }. H' H# O還有,即使你用robots禁止spider,還是會索引的,但只有鏈接(一部分或根本沒有)會出現在serp上." Z) ^% B! Z6 U; C1 d! a8 @
5 i6 z8 \1 }0 u% M2 X# g& M' c9 A& n
對了我有個food的autoblog.但沒你 首頁 那麼漂亮。1 l( j! B- h8 H* X" w$ h1 H+ s/ b
會美工真好
回復 给力 爆菊

使用道具 舉報

 樓主| 發表於 2010-2-2 11:08:04 | 顯示全部樓層
我那會什麼美工啊,那是我鼓搗了一周才鼓搗出來的,我新手,這是我第一個站,
回復 给力 爆菊

使用道具 舉報

發表於 2010-2-2 12:05:01 | 顯示全部樓層
你可以給這個wp地址添加一些站內外的鏈接
回復 给力 爆菊

使用道具 舉報

發表於 2010-2-2 19:44:32 | 顯示全部樓層
  用幾個最常見的情況,直接舉例說明:
2 Y! P( k9 |) [. J2 q6 V  1. 允許所有SE收錄本站:robots.txt為空就可以,什麼都不要寫。
0 N# r4 A, X7 K2 N. v9 l3 z+ M  2. 禁止所有SE收錄網站的某些目錄:
, v% ]% E; O6 r& l9 c# @- i  User-agent: *
% [6 \4 H1 n- w+ U8 _- @  Disallow: /目錄名1/
6 E) ~& r9 q* B4 h6 l  G  Disallow: /目錄名2/* x7 _$ f$ Z5 N5 _
  Disallow: /目錄名3/5 J4 S0 v  N3 E! z/ r
  3. 禁止某個SE收錄本站,例如禁止百度:
6 f# n  T0 Z5 c0 B* Y  User-agent: Baiduspider( `/ f1 z( F  e2 x, G( a3 n
  Disallow: /
2 A6 ?- j* j" v, \0 @% [, E3 X0 t( z  4. 禁止所有SE收錄本站:
& N' P! f% L( q% z: C  Q  User-agent: *5 h# J+ t( q8 @, Q  S$ d: q
  Disallow: /
9 a5 J, Y( y2 o, L  Y/ e  5. 加入sitemap.xml路徑,例如:. Y# n' h2 I; Y9 {: m
  Sitemap: http://www.advertcn.com/sitemap.xml
回復 给力 爆菊

使用道具 舉報

發表於 2010-2-2 20:17:42 | 顯示全部樓層
本帖最後由 sockpuppet 於 2010-2-2 20:22 編輯 $ Z6 N; T0 \  l& Z
3 @, R( M1 F  a& A
只有seo-greenhat答到點上.% Q# t+ \- M4 m- l$ M) R$ D( h5 b4 D+ K
不好意思,我在二樓沒回答到點上,而且誤導了ls的。; `% J9 Z, b2 K6 V7 _
lz想問他的網頁收錄如此之少,是不是因為robots.txt寫錯了。很明顯沒錯。7 j# g" D$ R' a$ ]! |# R- L
0 U2 p. g  b, Q( {$ @* g/ C* }
還有,你干麻用衝浪站阿
  n( \, Z. B3 t, f! Whttp://www.autosurfpro.com/cgi-bin/top.cgi
, ~4 X& Y5 S5 N忌諱忌諱。
  L+ U" I& H1 ?: H8 i, B
5 P: \: o" l; Z% X% V) W, q多弄幾個外鏈到% r& L, E5 v( b; {
http://sfood.net/wordpress/category/slimming-and-beaut6 t, z. c. o  X* U+ ?+ n
http://sfood.net/wordpress/category/healthy-cookbook5 t2 m9 t; p3 r& T; S2 |: J
http://sfood.net/wordpress/categ ... se-medicine-regimen/ s( I/ ?( ?  y# V9 f
http://sfood.net/wordpress/category/food-common-sense
" l+ M7 ~% e6 P; n( d( ^- G$ H就okay了,noindex,follow
回復 给力 爆菊

使用道具 舉報

發表於 2010-2-3 10:37:49 | 顯示全部樓層
不行用插件幫忙解決
回復 给力 爆菊

使用道具 舉報

發表於 2010-2-3 12:11:22 | 顯示全部樓層
學習了,感覺用好了robots,會非常有效
回復 给力 爆菊

使用道具 舉報

發表於 2010-2-9 12:44:12 | 顯示全部樓層
樓主的經驗很不錯。
回復 给力 爆菊

使用道具 舉報

您需要登錄後才可以回帖 登錄 | 免费注册

本版積分規則

过期高净值品牌域名预定抢注

4um點基跨境網編創業社區

GMT+8, 2024-10-31 01:33

By DZ X3.5

小黑屋

快速回復 返回頂部 返回列表