PBN的自我保護（1）

為了我們的月亮女神，我決定定期分享一些pbn的技巧和思路

今天說一下，如何讓pbn不被競爭對手察覺
+ h! o. D- o7 q3 F' }
: K: g0 e( x% {/ B4 n, q  G原理：
不被各種分析工具的蜘蛛給抓到
. M7 R8 Q# _' J& g
方式：
有很多種，，我只說一下robot的寫法

" T, x( p5 ?9 ?( V. ?2 Z2 Q我們先認識一下幾個通用的robot

rogerbot (SEOmoz)
5 Z7 E' z" P" w* rexabot (3ds.com)
, U' V8 h: U4 Q" iMJ12bot (majesticseo.com)
dotbot (dotnetdotcom.org)
9 j1 M5 F* a# B( d" ^+ p7 vgigabot (gigablast.com)
AhrefsBot (ahrefs.com)

我們robot可以這麼寫：
  _* \: ?- A4 k/ W

User-agent: rogerbot
- I( S/ C0 X0 x. P( f- W3 f& J- NDisallow: /

" q$ ?2 u# [: J1 F1 e$ }1 |User-agent: exabot
( S$ q( A/ i' _Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: dotbot
Disallow: /

/ r, N8 C- S: [User-agent: gigabot
Disallow: /

5 \- s& t/ |" qUser-agent: AhrefsBot
1 G" }/ I8 m8 H6 \Disallow: /

當然，如果想隱藏的非常好，這些還是不夠的，還需要屏蔽大概幾百個蜘蛛。

$ j& [# F( D" t- L( t  M  z9 x( q# w
# F! |1 a% v* e3 U

只要你不屏蔽googlebot，總會露出點蛛絲馬跡的

支持小黑同學出PBN專輯。。可以好好學習下了。
2 X- R! O1 r3 O  z

這個基本上是沒有用的，而且如果每個站都加上這樣的robots本身就是明顯的足跡
' g5 n& T9 C! E) {

還不如不加。。特意屏蔽掉這幾個。。別人一看就知道。

謝謝樓主的分享，等待後續
0 v* ?- S0 _" _) B

謝謝樓主分享經驗      
7 c1 K8 y# A: S" r

隱性判斷，不使用robots.
, W' n9 ]& x7 G9 j: A

禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？
0 R5 _& P$ x, T1 P# F
+ ?* j5 v$ J9 E0 X! o5 m' N

misca 發表於 2014-4-26 21:23
: z7 v! y3 S0 j  I禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？

...

' ?2 h" O+ `3 g- X可以的。。。只支持 google、bing等幾個。

User-Agent: Googlebot
: m5 M; h' T3 PAllow: /
User-Agent: *
8 e, j  r' B) O7 NDisallow: /