Re: поиск ликов

[Alex Antropoff]

18.05.2010 22:10, Maxim Dounin пишет:
> Hello!
>
> On Tue, May 18, 2010 at 05:45:11PM +0300, Alex Antropoff wrote:
>
>> Добрый день, как правильно отлавливать в nginx лики ?
>>
>> Предыстория - нужно было причесать доступ к видеокамерам, все разные,
>> отдают по http,  mjpeg/asf, урлы/пароли разные.
>>
>> Соответственно родился простой вариант вида:
>> listen       12345;
>> proxy_buffering off;
>> # а тут генератором сделано
>> location /aaaa {
>>          proxy_pass   http://x.y.z.x:80/img/video.asf;
>>          proxy_set_header Authorization "Basic ...";
>> }
>> location /aaab {
>>          proxy_pass   http://x.y.z.y:80/mjpg/video.mjpg;
>>          proxy_set_header Authorization "Basic ...";
>> }
>> ...
>> и так много раз.
>>
>> Проверял и на 0.7.65, и на 0.8.36/37.
>> Сторонних модулей нет.
>>
>> Раз в несколько дней возникает ситуация, при которой worker-ы
>> отъедают все, что только можно, причем постепенно.
>> Прогнал valgrind-ом - после выхода все чисто.
>> Как правильно выяснить, на что ушли те 500-600Mb в worker ?
>> Есть подозрение, что связано с бредовой отдачей mjpeg.
>
> При proxy_buffering off; и отсутствии Content-Length в ответе
> бекенда (т.е. если от nginx'а идёт chunked) - на каждый посылаемый
> блок данных расходуется ~120 байт памяти.  Освобождается эта
> память по окончании запроса.
Вот похоже оно и есть :-/
==32184== 66,920,960 bytes in 16,340 blocks are still reachable in loss 
record 5 of 5
==32184==    at 0x4005863: memalign (vg_replace_malloc.c:332)
==32184==    by 0x40058E2: posix_memalign (vg_replace_malloc.c:384)
==32184==    by 0x805FF53: ngx_memalign (ngx_alloc.c:56)
==32184==    by 0x804D4C2: ngx_create_pool (ngx_palloc.c:20)
==32184==    by 0x805E631: ngx_event_accept (ngx_event_accept.c:99)
==32184==    by 0x8064E5B: ngx_epoll_process_events (ngx_epoll_module.c:642)
==32184==    by 0x805CEAB: ngx_process_events_and_timers (ngx_event.c:245)
==32184==    by 0x8062826: ngx_single_process_cycle 
(ngx_process_cycle.c:306)
==32184==    by 0x804BCD2: main (nginx.c:393)

PS. если конфиг еще нужен - http://pastebin.com/hV4kFhQ8