nginx-1.1.1
Михаил Монашёв
postmaster на softsearch.ru
Ср Авг 24 09:10:46 UTC 2011
Здравствуйте, Igor.
>> >> Изменения в nginx 1.1.1 22.08.2011
>> >>
>> >> *) Изменение: теперь загрузчик кэша за каждую итерацию обрабатывает
>> >> число файлов, указанное в параметре load_files, или же работает не
>> >> больше времени, указанное в параметре loader_threshold.
>>
>> > To Миша:
>>
>> > Это изменение должно лечить долгую загрузку кеша под нагрузкой.
>> > Потестируй пожалуйста, вылечились ли у тебя проблемы при
>> > настройках по умолчанию.
>>
>> Затестил. С выключенным алгоритмом кеш-лоадер работаел 6 минут ( кушал
>> 50-60% процессора в top-e). С дефолтным включённым - 65 мин (кушал ~3%
>> процессора в top-e).
> Спасибо.
> Какой объём кэша ?
3 кэша по 180 гигов. Каждый кэш на отдельном sas-диске. Файлы - мелкие
картинки от 1 до 100 кб.
> Что значит "выключенным" - больший loader_threshold и нулевой loader_timeout ?
Да.
>> ИМХО, алгоритм должен адаптироваться к _текущей_ нагрузке на диски,
>> а не требовать от админа выбирать фактически неоптимальные
>> параметры.
> Тут не всё однозначно. Например, загрузчик в 1.0.5 на Линуксе/SSD
> забирал себе весь I/O и воркеры долго обслуживали запросы. Не знаю,
> почему. Загрузчик 1.1.0 грузил на SSD хорошо, но что происходило на
> обычных дисках, ты видел сам :)
Наверное надо как-то прямо или косвенно научиться считать скорость
отдачи и делать паузу кэш-лоадеру, если скорость отдачи падает. Можно
предположить, что скорость отдачи коррелирует и со скоростью работы
других приложений, завязанных на диск, так мы тем самым самым измеряет
нагрузку на диск. И постоянно менять продолжительность пауз, нащупывая
такое знаечение, которое не влияло бы на скорость отдачи. Т.е. как
только заметили подтормаживание, так сразу увеличиваем паузу на 10%, и
начинаем начинает по 0.01% паузу уменьшать. Заметили тормоза, снова
увеличиваем паузу.
Хотя можно и не морочиться, сейчас работает вполне сносно и быстрее
значительно, чем ранее.
--
С уважением,
Михаил mailto:postmaster at softsearch.ru
Подробная информация о списке рассылки nginx-ru