關於主機非瀏覽器流量的問題

( G5 ?9 C' S- t9 m9 C1 z一虛擬主機，每月9G的帶寬，主機放了一個WP做的網站，有20萬條記錄，google收錄1W+，網站沒什麼IP，之前每個月的帶寬使用都是一、兩G左右。
前幾天將WP做的網站整個刪除了。然後做了個新的網站，把數據庫、文件上傳到空間。
發現這幾天帶寬暴漲，而且404錯誤的非瀏覽器流量佔了26G，不知道是不是因為我刪除了網站數據的問題？
. k6 ?" {" S8 C5 @# J/ d

3 g0 a) T; i2 L7 D. [$ N  a# L0 t0 r
9 y) W' g3 C" Y) G& r' `; |7 Q! S
, T0 r0 \4 g* N& e3 A5 C

這個光看圖，還是搞不清楚的，要你自己來研究了

是不是刪除文件後，搜索引擎來檢索這些頁面，造成的非瀏覽器流量

( X' r/ r& Q5 u6 _

月光飛燕 發表於 2013-6-23 17:28
是不是刪除文件後，搜索引擎來檢索這些頁面，造成的非瀏覽器流量

我懷疑這個可能很大，要是這樣的話，有什麼方法能避免呢？用robot.txt限制蜘蛛嗎
& _: c7 s  L# ]  I3 K
+ e& O  A: ?/ {) K* ^