Re[2]: Проблемы с загрузкой кэша

Михаил Монашёв postmaster на softsearch.ru
Вт Дек 22 16:07:58 MSK 2009


Здравствуйте, Игорь.

>> Один  30-ти  гиговый  кэш cache loader закачивает ровно час. А всего у
>> меня  их  3.  И  каждый  будет  по  200 гигов. Т.е. его загрузка будет
>> происходить за 20 часов?
>> 
>> При этом иерархия директорий кэша 1:2. Т.е. надо считать 16*256 = 4096
>> директорий. Вопрос, почему они так долго считываются? Или cache loader
>> ещё и в сами файлы заглядывает?

IS> Конечно, заглядывает.

А что именно он читает из файла?

IS> Долго грузится, потому что используется такая эвристика
IS> (не знаю, насколько верная) - если загрузка 100 файлов заняла больше 200ms,
IS> то спим 200ms, чтобы не загружать диски. Вообще загрузка - это фоновый
IS> процесс, который не влияет на текущую работу: при необходимости воркеры
IS> сами проверяют данные на диске, если их ещё нет в памяти. Загрузка всего
IS> кэша нужна для того, чтобы удалить неиспользуемые данные после рестарта
IS> и чтобы поддерживать размер кэша, если задано ограничение.

По моими субъективным ощущениям загрузка кэша не тормозит раздачу. Так
что эвристика вроде успешно работает.

--

С уважением,
Михаил Монашёв, SoftSearch.ru
mailto:postmaster at softsearch.ru
ICQ# 166233339
http://michael.mindmix.ru/
Без бэкапа по жизни.




Подробная информация о списке рассылки nginx-ru