pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的
, i9 O- u3 ~: Y' n2 L4 E& x7 g
" d8 w, z( {2 k- ~( O/ J# u8 S3 M: S[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot
5 y3 q" r# L: X8 ~$ R: @SetEnvIfNoCase User-Agent .*exabot.* bad_bot
$ E+ J- i: P; K4 v( vSetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
, w; c$ I# d, T, z# dSetEnvIfNoCase User-Agent .*dotbot.* bad_bot# L: e2 R3 R/ i+ K$ n
SetEnvIfNoCase User-Agent .*gigabot.* bad_bot" c+ w8 M; ~2 o0 D* g! m- G
SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot
1 V1 C6 }( f% u" M# t! Q; `SetEnvIfNoCase User-Agent .*sitebot.* bad_bot' n) U+ ~# w) |1 c
<Limit GET POST HEAD>
: h* ?) f) }4 N# E2 NOrder Allow,Deny& V7 V; Y0 H o' ?
Allow from all
, r2 n7 ^4 C0 f' l7 t" UDeny from env=bad_bot3 {1 k8 E3 [0 Y8 |7 F) j
</Limit>[/mw_shl_code]
' t+ {% ~- l: U, J9 e! K# I1 t4 v# g' j+ c7 A& Q
但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!
1 g% ]0 N2 z0 P2 ?
* u4 k- @. z! v4 h- d |