PBN的自我保護（1）

為了我們的月亮女神，我決定定期分享一些pbn的技巧和思路

$ ?& G8 B- h) W4 y今天說一下，如何讓pbn不被競爭對手察覺

' _9 ^0 ^6 f" A1 ?$ \原理：
6 f& R  T9 D3 V6 i3 R不被各種分析工具的蜘蛛給抓到

' Y8 \! t7 ^1 t" Z% m. R方式：
有很多種，，我只說一下robot的寫法

我們先認識一下幾個通用的robot
( P* E# L3 ^. J

rogerbot (SEOmoz)
  D/ u4 `1 ^* v/ A$ Z. U4 ]exabot (3ds.com)
MJ12bot (majesticseo.com)
dotbot (dotnetdotcom.org)
gigabot (gigablast.com)
( r9 s  R) K$ f! y' v4 CAhrefsBot (ahrefs.com)

我們robot可以這麼寫：

User-agent: rogerbot
& t  Y3 W* I1 ?* K' {5 fDisallow: /
4 Q4 `! }- B5 M
9 C+ X1 ]( D) ~1 `' A1 UUser-agent: exabot
Disallow: /

" v  Y# L# `" o% zUser-agent: MJ12bot
8 }. y$ o5 m, Q) z5 N) r3 K. oDisallow: /

* b6 u) ^$ u( Y+ VUser-agent: dotbot
9 K% I, k* G$ G4 O( I$ s% P) \( t$ m6 bDisallow: /
5 q, W9 D% h: ~
+ E0 u/ I4 Z6 T2 J5 h9 f0 H. sUser-agent: gigabot
Disallow: /

" E  m/ F. c1 aUser-agent: AhrefsBot
; X1 s' L1 y5 j" j; n1 x6 e* ^  Q3 KDisallow: /

當然，如果想隱藏的非常好，這些還是不夠的，還需要屏蔽大概幾百個蜘蛛。


" k6 B) \9 q1 \. Q

只要你不屏蔽googlebot，總會露出點蛛絲馬跡的

支持小黑同學出PBN專輯。。可以好好學習下了。

這個基本上是沒有用的，而且如果每個站都加上這樣的robots本身就是明顯的足跡
7 T; \7 A0 q+ y& U; X( f' L+ J, ]

還不如不加。。特意屏蔽掉這幾個。。別人一看就知道。
/ W; _) Y  X, A) c( ^

謝謝樓主的分享，等待後續
; [& r% W8 Z; O& Z1 |

謝謝樓主分享經驗      

隱性判斷，不使用robots.

禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？
) O( j: A; F8 ^' ^

misca 發表於 2014-4-26 21:23
禁用那麼多，還要去慢慢找，直接寫 僅支持 google等幾個常用的蜘蛛不就可以了？？

* e4 q( e; i- ~6 h- d8 M) r ...

% l) N' n7 |1 @5 |2 A" t$ r可以的。。。只支持 google、bing等幾個。
  \+ t* ^) x0 f7 r1 |9 j4 M$ p0 h

User-Agent: Googlebot
Allow: /
3 D( l7 f8 b& D6 ]( G% [" j8 yUser-Agent: *
Disallow: /

: \3 a% a! e% i" F) T
: \( Y, U9 s. Y5 Q: U3 _% z