Re[2]: Проблемы с загрузкой кэша
Михаил Монашёв
postmaster на softsearch.ru
Вт Дек 22 16:07:58 MSK 2009
Здравствуйте, Игорь.
>> Один 30-ти гиговый кэш cache loader закачивает ровно час. А всего у
>> меня их 3. И каждый будет по 200 гигов. Т.е. его загрузка будет
>> происходить за 20 часов?
>>
>> При этом иерархия директорий кэша 1:2. Т.е. надо считать 16*256 = 4096
>> директорий. Вопрос, почему они так долго считываются? Или cache loader
>> ещё и в сами файлы заглядывает?
IS> Конечно, заглядывает.
А что именно он читает из файла?
IS> Долго грузится, потому что используется такая эвристика
IS> (не знаю, насколько верная) - если загрузка 100 файлов заняла больше 200ms,
IS> то спим 200ms, чтобы не загружать диски. Вообще загрузка - это фоновый
IS> процесс, который не влияет на текущую работу: при необходимости воркеры
IS> сами проверяют данные на диске, если их ещё нет в памяти. Загрузка всего
IS> кэша нужна для того, чтобы удалить неиспользуемые данные после рестарта
IS> и чтобы поддерживать размер кэша, если задано ограничение.
По моими субъективным ощущениям загрузка кэша не тормозит раздачу. Так
что эвристика вроде успешно работает.
--
С уважением,
Михаил Монашёв, SoftSearch.ru
mailto:postmaster at softsearch.ru
ICQ# 166233339
http://michael.mindmix.ru/
Без бэкапа по жизни.
Подробная информация о списке рассылки nginx-ru