求助 robots不知啥問題導致谷歌提示

robots.txt不知啥問題導致谷歌提示 A description for this result is not available because of this site's robots.txt – learn more
屏蔽顯示我好幾個網頁
大家看下我的robots 我是照書上抄的啊
User-agent: *
Disallow: /cgi-bin
; o  ?6 h, O( N5 ^+ R& H/ fDisallow: /wp-admin
/ M5 x- b2 ~8 p# \  VDisallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
! l' `4 Y) A+ QDisallow: /wp-content/themes
# C$ m; ?+ B4 q5 J# c9 ^Disallow: /trackback
+ [7 p9 n) E) i5 c8 |Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
+ @% C* Z  i: M0 H$ u! o% K5 BDisallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
9 c( Q+ g& j, S) [( W4 ~9 kDisallow: /*?
$ _: w2 w+ S+ V* F" N6 W7 y" @1 |Allow: /wp-content/uploads
, M' R2 J+ x0 g8 o1 T1 b6 z
6 ]0 I0 u  b" O$ v2 h4 t- S2 X# Google Image
User-agent: Googlebot-Image
8 G3 }/ q8 m% TDisallow:
Allow: /*
2 V# \3 B! {" s: M, A, w8 R
* o, h; v4 {# g9 U4 O# Google AdSense
3 Y! M6 G7 I' r8 l7 e# r( Y$ _User-agent: Mediapartners-Google*
, e4 y" D! k7 m  }9 [Disallow:
Allow: /*

/ C& G. ^$ a# O0 }+ u+ e) YSitemap: http://www.XXXXXX.com/sitemap.xml

- o2 g# ^3 M0 X. l/ i+ a0 T

沒碰到這樣的問題，話說樓主限制的好嚴格啊

a219549 發表於 2013-4-13 22:56
! ]0 L  a5 f& ~3 e8 ^. j# u沒碰到這樣的問題，話說樓主限制的好嚴格啊

6 D. z# s: _  U' t額 書上抄下來的，估計這樣安全一些吧
5 N! k+ w4 f6 J  c7 O4 @7 p2 b

regent 發表於 2013-4-13 23:07
$ s$ g/ ~4 V4 a. {  h7 \0 I額 書上抄下來的，估計這樣安全一些吧

2 s) b4 z% ?7 _* p" f6 j其實後面那兩個google的蜘蛛沒必要限制吧，去google站長管理工具看下，裡面有個robots的相關工具
0 Q+ r+ s5 V; k6 z/ Y

a219549 發表於 2013-4-13 23:09
其實後面那兩個google的蜘蛛沒必要限制吧，去google站長管理工具看下，裡面有個robots的相關工具
...

謝謝 我去看看去


0 J) A+ b( N' L/ F: N$ [) y( T- g" w

把 第一個整體中的那個 Allow: /wp-content/uploads  改成了 Allow: /* 不知道對不對

google 網管工具 --已攔截的網址   這裡可以測試你的robots是否禁用某一頁面

感覺可以把後面兩個刪除，估計谷歌就不能提示了

puke 發表於 2013-4-14 00:57
google 網管工具 --已攔截的網址   這裡可以測試你的robots是否禁用某一頁面

Googlebot  下面顯示 Not in domain 是因為沒收錄嗎？ 還是啥？

hlzone 發表於 2013-4-14 09:09
感覺可以把後面兩個刪除，估計谷歌就不能提示了

/ E; B2 j( @; ~, Z8 P6 I1 K 第一個整體中的那個 Allow: /wp-content/uploads  改成了 Allow: /*   再把你說的刪掉  不知道對不對
( Z! c4 @, b. l: `