pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的
+ P. J9 n; ^2 m3 I/ q( V/ z$ F/ o! c8 f, c/ [
[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot2 w0 T! [( P' D: V2 }1 X( u
SetEnvIfNoCase User-Agent .*exabot.* bad_bot7 u2 b Y# ~( B! i
SetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
( j- z% {4 B- M2 @SetEnvIfNoCase User-Agent .*dotbot.* bad_bot0 m' `5 \7 _! H
SetEnvIfNoCase User-Agent .*gigabot.* bad_bot* n; P. ]- I+ a, w: j
SetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot
( s! m- y* _ ]& XSetEnvIfNoCase User-Agent .*sitebot.* bad_bot6 B I6 h+ f3 r
<Limit GET POST HEAD>/ v5 P, R _. p: l
Order Allow,Deny
2 M6 d2 C8 g6 v4 S# lAllow from all0 X& H8 F$ T" F3 }" D: Q
Deny from env=bad_bot+ ~3 c5 H' N) L( O7 H
</Limit>[/mw_shl_code]8 v3 `$ M) d* }, t6 ?5 T5 A* [
- s! h; A, p$ x; h* q但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!; s" @2 l9 {/ }& n: T, C1 y
+ i# o( d( i8 O' c4 Z1 y
|