Забанить бота bingbot

Опубликовано 2016.03.24 в разделе Разное.

Забанить эту сволоту можно в к конфиге Nginx. В директории server добавьте следующий код. 
  1. if ($http_user_agent ~ bingbot) {
  2.     return 503;
  3. }
После этого вашему серверу полегчает. Да, не забываем сделать : 
  1. service nginx reload
Потом вы можете легко проверить, работает ли данное правило. 
  1. $opts = array(
  2.  'http' => array('user_agent' => 'Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)')
  3. );
  4. $context = stream_context_create($opts);
  5. $res = file_get_contents("your site url", false, $context);