pbn屏蔽ahrefs等蜘蛛,用robots.txt不是辦法,好的辦法是在.htaccess上屏蔽。.htaccess上是這樣的7 _9 l/ ~. y0 f* z I
, D0 w$ O1 K! l( ~3 T% b
[mw_shl_code=applescript,true]SetEnvIfNoCase User-Agent .*rogerbot.* bad_bot" @9 J2 [9 A, {3 z* R
SetEnvIfNoCase User-Agent .*exabot.* bad_bot8 s& w/ l0 h6 K, S9 R I$ L
SetEnvIfNoCase User-Agent .*mj12bot.* bad_bot
7 d: |+ z2 ^" n/ v. }5 J5 X5 ySetEnvIfNoCase User-Agent .*dotbot.* bad_bot
& q+ D- U0 H; v) `: |2 X y F% ZSetEnvIfNoCase User-Agent .*gigabot.* bad_bot
1 i8 c) W9 L, Y' c+ t6 sSetEnvIfNoCase User-Agent .*ahrefsbot.* bad_bot
2 \* T7 M$ G1 j2 `) _" P$ USetEnvIfNoCase User-Agent .*sitebot.* bad_bot/ A2 Q2 U. I% o* c
<Limit GET POST HEAD>/ Q( `. \5 l( u$ g* |; ~
Order Allow,Deny2 q/ |+ u- I' g# n
Allow from all
0 Y' H! T6 e: ?0 C- _Deny from env=bad_bot
) l6 l- E/ K7 C</Limit>[/mw_shl_code]" S7 Q9 k5 m$ T' d! ^5 b
# O4 d p+ [$ J. ^1 P
但問題來了,vps都是nginx的,小白不知道怎麼改。那位高人幫改下,謝謝!
( S& v7 `* ?0 c+ y3 a4 r3 d) r" e, V& f
|