Баним левых ботов

Dr_Brown

Dr_Brown

Пользователь
Открыть .htaccess в корне сайта, добавить:

Код: 
SetEnvIf User-Agent MJ12bot MustDie=1
SetEnvIf User-Agent Twiceler MustDie=1
SetEnvIf User-Agent Baiduspider MustDie=1
SetEnvIf User-Agent Slurp MustDie=1
SetEnvIf User-Agent Java MustDie=1
SetEnvIf User-Agent CommentReader MustDie=1
SetEnvIf User-Agent Dolphin MustDie=1
SetEnvIf User-Agent Yeti MustDie=1
SetEnvIf User-Agent discobot MustDie=1
SetEnvIf User-Agent BTWebClient MustDie=1
SetEnvIf User-Agent Tagoobot MustDie=1
SetEnvIf User-Agent Ezooms MustDie=1
SetEnvIf User-Agent igdeSpyder MustDie=1
SetEnvIf User-Agent AhrefsBot MustDie=1
Order allow,deny
Allow from all
Deny from env=MustDie
 
Dr_Brown

Dr_Brown

Пользователь
Exile, даже когда 0 человек, проц плясал от 15 до 30 %, по синусоиде, и baidu логи просто засирал.
 
Exile

Exile

Администратор
Яндекс и Google по такой логике тоже банить надо. Надо сервер корректно настраивать, а не блокировать поисковых ботов.
 
Dr_Brown

Dr_Brown

Пользователь
Exile, никто поисковых не банит.....можна подумать что у всех прям индексация в baidu жесть....во всяком случае боты яши и гоши не грузят сервак.
 
Varius

Varius

Пользователь
Exile, я вот и пытался намекнуть в соседнем топике что надо апачь убить и все будет пахать =)
 
Сверху