борьба с ботами средствами nginx

MZ zuborg at advancedhosters.com
Mon Mar 16 16:35:15 MSK 2009


Roman Hlynovskiy wrote:
> добрый день,
> 
> а у кого какой опыт есть борьбы с поисковыми ботами средствами nginx?
> 
> сегодня столкнулись с интересной проблемой - дурной клиент то-ли купил
> сервис по seo-оптимизации, то-ли сам где-то научился, но его ресурс
> обступили вкруговую поисковые боты.
> одновременно 10-15 разных поисковых ботов начали активно индексировать
> ресурс. все-бы ничего, но ресурс поднят на базе одного очень дурного
> CMS разработчики которого видимо не в курсе что существуют понятия
> индексов в БД.
> в итоге получился небольшой DOS. сервер выдержал, но 'осадок' остался,
> в виде очень нехороших iowait'ов.
> 
> хотел-бы узнать кто-как решает подобные наплывы ботов у себя?
> закрывать полностью ip-адреса ботов тоже не вариант, т.к. речь идет о
> шаред хостинге.

nginx - не панацея ( http://ru.wikipedia.org/wiki/Панацея ), а всего 
лишь хороший инструмент.

В т.ч. индексы у базы от использования nginx-а не появятся :)





More information about the nginx-ru mailing list