Re: Иногда кеш растет сверх лимита
kpoxa
kpoxa на kpoxa.net
Пт Авг 14 16:14:45 UTC 2015
Добрый день.
Вот сейчас воспроизвелась проблема, если сделать strace на cache manager,
то видно, что есть удаления файлов с одного из двух кешей, со второго нет,
иногда бывают
futex(0x7fec52473070, FUTEX_WAIT, 0, NULL) = -1 EAGAIN (Resource
temporarily unavailable)
...
futex(0x7fec52473070, FUTEX_WAKE, 1) = 0
...
futex(0x7fec52473070, FUTEX_WAKE, 1) = 1
-HUP не помогает, несмотря на смену всех процессов, кроме рутового.
14 августа 2015 г., 14:28 пользователь kpoxa <kpoxa at kpoxa.net> написал:
> Добрый день.
>
> Просто так никто никаких сигналов не отправлял. Судя по логам процессы не
> умирали.
> На сервере debian, обновление конфига делается через -HUP мастер процессу
> (это в инит скрипте reload делает).
> И раз в сутки ротация логов с kill -USR1 `cat /var/run/nginx.pid`
> Что можно для диагностики сделать в случае если замечу, что кеш
> переполняется?
>
> 13 августа 2015 г., 21:19 пользователь Maxim Dounin <mdounin at mdounin.ru>
> написал:
>
>> Hello!
>>
>> On Thu, Aug 13, 2015 at 06:41:44PM +0300, kpoxa wrote:
>>
>> > Добрый день.
>> >
>> > Есть сервер с 2 SSD под кеш
>> >
>> > Filesystem Size Used Avail Use% Mounted on
>> > /dev/sdb1 210G 167G 44G 80% /ssd2
>> > /dev/sda3 200G 157G 44G 79% /ssd
>> >
>> > и следующий конфиг:
>> >
>> > proxy_cache_path /ssd levels=1:2 keys_zone=ssd1:2000m
>> > max_size=160000m inactive=7d loader_files=1000 use_temp_path=off;
>> > proxy_cache_path /ssd2 levels=1:2 keys_zone=ssd2:2000m
>> > max_size=170000m inactive=7d loader_files=1000 use_temp_path=off;
>> > split_clients $uri$is_args$args $disk {
>> > 56.3% 2;
>> > * 1;
>> > }
>> >
>> > server {
>> > ...
>> > location / {
>> > proxy_cache ssd$disk;
>> >
>> > }
>> > }
>> >
>> > Периодически кеш разрастается выше лимита, пока не занимает весь диск.
>> > При рестарте nginx место очищается до максимально разрешенного
>>
>> Что при этом в логах? Падения рабочих процессов, администраторы с
>> шаловливыми руками и правом отсылки сигналов nginx'у? Проще всего
>> на такое наступить, если рабочий процесс упал и/или был
>> принудительно завершён, и не смог разблокировать элементы кеша.
>>
>> Ну и я просто оставлю эти ссылки тут, на всякий случай:
>>
>> http://mailman.nginx.org/pipermail/nginx-ru/2015-May/055936.html
>> http://mailman.nginx.org/pipermail/nginx-ru/2015-May/055937.html
>>
>> --
>> Maxim Dounin
>> http://nginx.org/
>>
>> _______________________________________________
>> nginx-ru mailing list
>> nginx-ru at nginx.org
>> http://mailman.nginx.org/mailman/listinfo/nginx-ru
>
>
>
>
> --
> Kpoxa
>
--
Kpoxa
-------------- next part --------------
An HTML attachment was scrubbed...
URL: <http://mailman.nginx.org/pipermail/nginx-ru/attachments/20150814/a06a0085/attachment.html>
Подробная информация о списке рассылки nginx-ru