英文站的robots.txt文件該怎麼寫?

顯示全部樓層 · 發表於 2011-5-23 15:12:13

本帖最後由 angel 於 2011-5-25 15:25 編輯

RT,在網上找到個robots.txt收改了一下,但是GG還是收錄一些TAG頁,問下大家針對GOOGLE的robots.txt都怎麼寫,謝謝了

顯示全部樓層 · 發表於 2011-5-23 17:38:56

為什麼不能發貼，還能做任務

顯示全部樓層 · 發表於 2011-5-24 15:15:40

其實收點tag頁無傷大雅

顯示全部樓層 · 發表於 2011-5-24 15:19:52

修改後效果沒那麼快的

顯示全部樓層 · 發表於 2011-5-25 11:58:52

TAG頁面有很多重複的,這樣收錄會影響網站權重的

顯示全部樓層 · 發表於 2011-5-25 15:36:03

XML裡不要加入TAG就好了，自然收錄的東西一般不會影響排名和權重的。

		自動登錄	找回密碼
密碼			免费注册