过期域名预定抢注

 找回密碼
 免费注册

baiduSpider常見問題解答

[複製鏈接]
發表於 2005-2-11 18:01:05 | 顯示全部樓層 |閱讀模式
1. 什麼是baiduspider?
9 m  ?! V. U3 Ebaiduspider是Baidu搜索引擎的一個自動程序。它的作用是訪問互聯網上的html網頁,建立索引數據庫,使用戶能在Baidu搜索引擎中搜索到貴網站的網頁。 
& o8 n# r1 \) ]2 G& {6 C2 C) f0 ~' P' w+ j% X# U7 S
2. baiduspider為什麼大量訪問我的網頁? , A: L% b7 n; u8 ]% o# o
baiduspider訪問您的網頁後,會自動分析每個網頁上的文字內容並記憶網頁網址,然後其它網友才能通過百度搜索引擎找到您的網頁。如果baiduspider不訪問您的網頁,那麼所有通過baiduspider提供網頁信息的搜索引擎都找不到您的網頁,也就是說,其它網友在百度搜狐新浪雅虎Tom等幾十個搜索網站都會找不到您的網頁。 
, d+ c' N9 l9 k( z. d, G您可以到這裡進一步瞭解搜索引擎4 m4 I/ S6 F* z0 c4 q
+ Q, E& N) Z" u) P, H+ B0 G( P
3. baiduspider對一個網站服務器造成的訪問壓力如何?: n2 C9 [6 J" P$ B+ ^  I

" `! T6 L& o% Z) l對於一個網站,baiduspider每訪問一個網頁會間隔30秒,不會造成過大壓力。
4 T+ E0 x, E/ _; |, F& y3 u' [5 T' k# H7 S% f
4. 我不想我的網站被baiduspider訪問,我該怎麼做?3 a% F. r: T9 Y2 i
0 z# X# `4 v8 Z6 j1 O9 D1 E4 M
baiduspider像其它spider一樣遵守互聯網robots協議。您可以利用robots.txt文件完全禁止baiduspider訪問您的網站,或者禁止baiduspider訪問您網站上的部分文件。' z8 }) W- a% |' S; L6 M1 p, N  z

! B; R. _, g# z+ K& U5 J2 z" J注意:禁止baiduspider訪問您的網站,將使您的網站上的所有網頁,在Baidu搜索引擎以及所有Baidu提供搜索引擎服務的搜索引擎中無法被搜索到,包括搜狐、新浪、雅虎、Tom、Lycos等幾十個搜索引擎。4 Q/ n1 I1 n) w# D
' Z6 |) u6 O: P, m
關於robots.txt的寫作方法,請參看我們的介紹:robots.txt寫作方法4 x4 A: _5 R$ A2 I) c/ z2 a+ `
( a! K% L% H" T; b
5. 為什麼我的網站已經加了robots.txt,還能在百度搜索出來?: O; K2 i& |% j6 W  a$ i

! k- g* u% B) c; l/ c2 L9 w因為搜索引擎索引數據庫的更新需要時間。雖然baiduspider已經停止訪問您網站上的網頁,但Baidu搜索引擎數據庫中已經建立的網頁索引信息,可能需要2到4周才會清除。
& Z0 D% J* ~- {( D# k( r% H
0 X6 i5 v1 k" g6. baiduspider多長時間之後會重新抓取我的網頁?
( z0 w7 B& d+ N$ f
" g- {% u1 r# s: r' Q8 \" l" kBaidu搜索引擎平均兩周更新一次,網頁視重要性有不同的更新率,少則幾天,多則1月,baiduspider會重新訪問和更新一個網頁。8 ^4 L& Y* K9 ^( J) T& t* I
5 m2 P7 G" H2 C" z) p
7. baidu蜘蛛在robots.txt中的名字是什麼?
, R  X8 l# v: ^* n* K9 i& W
; X& B& b- L) s6 P$ ?6 z4 j; Rbaiduspider,全部為小寫字母。完全禁止baiduspider訪問的robots文件內容為:; y: I: u4 d7 F

4 G# v$ s2 v9 R2 n/ n
# {! N% @3 m/ l, [. L% k& r6 B$ C0 oUser-agent: baiduspider
. t+ E* D) d" pDisallow: /
發表於 2005-3-12 17:14:12 | 顯示全部樓層
提示: 作者被禁止或刪除 內容自動屏蔽
回復 给力 爆菊

使用道具 舉報

您需要登錄後才可以回帖 登錄 | 免费注册

本版積分規則

过期高净值品牌域名预定抢注

點基

GMT+8, 2026-8-28 03:19

By DZ X3.5

小黑屋

快速回復 返回頂部 返回列表