關於主機非瀏覽器流量的問題

2 ^5 \. j& k: Z/ D; }$ h+ M
7 d  M2 \( d. T1 l/ B* y: A" j一虛擬主機，每月9G的帶寬，主機放了一個WP做的網站，有20萬條記錄，google收錄1W+，網站沒什麼IP，之前每個月的帶寬使用都是一、兩G左右。
# S, A$ C( J3 S7 u% q4 [; j5 m3 P" k前幾天將WP做的網站整個刪除了。然後做了個新的網站，把數據庫、文件上傳到空間。
3 h  f: P' r4 y發現這幾天帶寬暴漲，而且404錯誤的非瀏覽器流量佔了26G，不知道是不是因為我刪除了網站數據的問題？

( j/ ^) ^) s9 z4 |* n1 A0 R
6 V# Y; Y5 B/ p, |9 w. v
+ w) R2 k5 O+ P( Z

這個光看圖，還是搞不清楚的，要你自己來研究了

是不是刪除文件後，搜索引擎來檢索這些頁面，造成的非瀏覽器流量

月光飛燕 發表於 2013-6-23 17:28
* R  [! ?6 j! q! J) v5 H是不是刪除文件後，搜索引擎來檢索這些頁面，造成的非瀏覽器流量

我懷疑這個可能很大，要是這樣的話，有什麼方法能避免呢？用robot.txt限制蜘蛛嗎
7 g  P, y7 b3 J( E6 t
% e- G5 \& I& j2 K9 t& M