Re: nginx есть десятки гигабат памяти и сервер уходит в swap

Дугин Сергей drug на qwarta.ru
Вт Янв 11 02:27:57 UTC 2022


Здравствуйте, Илья.

Вы писали 10 января 2022 г., 21:43:07:

> При релоаде у вас запускаются новые воркеры, а старые остаются запущенными
> (при правильной настройке они будут завершены). Я имею в виду, мониьорите
> ли вы количество воркеров
да, их контролирую.


> On Mon, Jan 10, 2022, 8:43 PM Дугин Сергей <drug at qwarta.ru> wrote:

>> Здравствуйте, Илья.
>>
>> Да reload делал не помогает и через killall-9 nginx делал,
>> воркеров пробовал и так
>> worker_processes auto;
>> и так
>> worker_processes 6;
>>
>> Памяти на сервере 128 гиг
>> 48 ядер
>> и из 128 гиг более 80 гиг кушает nginx
>>
>>
>> Вы писали 10 января 2022 г., 17:48:47:
>>
>> > reload делаете ? количество процессов-воркеров мониторите ?
>>
>> > пн, 10 янв. 2022 г. в 17:41, Дугин Сергей <drug at qwarta.ru>:
>>
>> >> Здравствуйте, Nginx-ru.
>> >>
>> >> Помогите nginx в течении часа после запуска начинает жрать порядка 60-70
>> >> гигобайт памяти и дальше растет
>> >> не хвтает свапа и сервер перегружать приходится если вовремя не килнуть
>> и
>> >> не перезапустить nginx
>> >> Скриншот прилагаю.
>> >> Была более старая версия, таже была проблема.
>> >>
>> >> В логе  ошибок
>> >> error_log  /var/log/nginx/error.log warn;
>> >> Ошибок нет
>> >>
>> >> Меня смущает только такие параметры в nginx:
>> >>     server_names_hash_max_size 131070;
>> >>     server_names_hash_bucket_size 128;
>> >>
>> >> Но если делать меньше nginx не запускается, так как порядка 2000
>> доменов в
>> >> конфиге прописано. Подбирал эти числа на практике.
>> >> Но даже с ними не понятно почему пару процессов nginx отжирают по 30 гиг
>> >> RAM
>> >>
>> >> Больше идей нет, есть у кого-нибудь мысли как можно починить ситуацию?
>> >>
>> >> nginx version: nginx/1.20.2
>> >>
>> >> built by gcc 4.8.5 20150623 (Red Hat 4.8.5-39) (GCC)
>> >> built with OpenSSL 1.0.2k-fips  26 Jan 2017
>> >> TLS SNI support enabled
>> >> configure arguments: --prefix=/etc/nginx --sbin-path=/usr/sbin/nginx
>> >> --modules-path=/usr/lib64/nginx/modules
>> --conf-path=/etc/nginx/nginx.conf
>> >> --error-log-path=/var/log/nginx/error.log
>> >> --http-log-path=/var/log/nginx/access.log --pid-path=/var/run/nginx.pid
>> >> --lock-path=/var/run/nginx.lock
>> >> --http-client-body-temp-path=/var/cache/nginx/client_temp
>> >> --http-proxy-temp-path=/var/cache/nginx/proxy_temp
>> >> --http-fastcgi-temp-path=/var/cache/nginx/fastcgi_temp
>> >> --http-uwsgi-temp-path=/var/cache/nginx/uwsgi_temp
>> >> --http-scgi-temp-path=/var/cache/nginx/scgi_temp --user=nginx
>> --group=nginx
>> >> --with-compat --with-file-aio --with-threads --with-http_addition_module
>> >> --with-http_auth_request_module --with-http_dav_module
>> >> --with-http_flv_module --with-http_gunzip_module
>> >> --with-http_gzip_static_module --with-http_mp4_module
>> >> --with-http_random_index_module --with-http_realip_module
>> >> --with-http_secure_link_module --with-http_slice_module
>> >> --with-http_ssl_module --with-http_stub_status_module
>> >> --with-http_sub_module --with-http_v2_module --with-mail
>> >> --with-mail_ssl_module --with-stream --with-stream_realip_module
>> >> --with-stream_ssl_module --with-stream_ssl_preread_module
>> >> --with-cc-opt='-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions
>> >> -fstack-protector-strong --param=ssp-buffer-size=4 -grecord-gcc-switches
>> >> -m64 -mtune=generic -fPIC' --with-ld-opt='-Wl,-z,relro -Wl,-z,now -pie'
>> >>
>> >>  cat /etc/os-release
>> >> NAME="CloudLinux"
>> >> VERSION="7.9 (Boris Yegorov)"
>> >> ID="cloudlinux"
>> >>
>> >> Linux 3.10.0-962.3.2.lve1.5.42.el7.x86_64 #1 SMP Mon Nov 9 08:11:18 EST
>> >> 2020 x86_64 x86_64 x86_64 GNU/Linux
>> >>
>> >>
>> >> top - 17:33:50 up 12:18,  1 user,  load average: 13.88, 13.09, 12.50
>> >> Tasks: 909 total,   7 running, 901 sleeping,   0 stopped,   1 zombie
>> >> %Cpu(s): 12.1 us,  4.8 sy,  0.1 ni, 82.2 id,  0.3 wa,  0.0 hi,  0.6 si,
>> >> 0.0 st
>> >> KiB Mem : 13182188+total,  4598376 free, 75250656 used, 51972864
>> buff/cache
>> >> KiB Swap: 10077298+total, 96888000 free,  3884988 used. 44158760 avail
>> Mem
>> >>
>> >>   PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+
>> COMMAND
>> >> 12785 root      20   0   35.0g  34.0g   2440 S  28.0 27.1  10:43.40
>> nginx
>> >> 12807 root      20   0   14.4g  13.4g   2448 S  29.6 10.6   4:22.15
>> nginx
>> >> 12805 root      20   0 2904776   1.8g   2588 S   3.0  1.4   1:10.02
>> nginx
>> >> 12802 root      20   0 2880556   1.8g   2432 S   2.0  1.4   0:52.17
>> nginx
>> >> 12799 root      20   0 2859616   1.8g   2452 S   1.6  1.4   0:31.47
>> nginx
>> >> 12795 root      20   0 2844724   1.7g   2436 S   1.0  1.4   0:23.12
>> nginx
>> >> 12793 root      20   0 2838340   1.7g   2548 S   0.3  1.4   0:19.55
>> nginx
>> >> 12791 root      20   0 2831640   1.7g   2432 S   0.7  1.4   0:17.34
>> nginx
>> >> 12779 root      20   0 2823876   1.7g   2404 S   0.3  1.4   0:12.40
>> nginx
>> >> 12778 root      20   0 2821256   1.7g   2352 S   0.0  1.4   0:10.86
>> nginx
>> >> 12777 root      20   0 2819208   1.7g   2392 S   0.7  1.4   0:09.13
>> nginx
>> >> 12774 root      20   0 2816544   1.7g   2364 S   0.3  1.4   0:08.00
>> nginx
>> >> 12771 root      20   0 2815748   1.7g   2392 S   0.7  1.4   0:07.82
>> nginx
>> >> 12767 root      20   0 2813880   1.7g   2324 S   0.3  1.4   0:06.81
>> nginx
>> >> 12763 root      20   0 2813828   1.7g   2348 S   0.0  1.4   0:06.76
>> nginx
>> >> 12761 root      20   0 2813480   1.7g   2360 S   0.7  1.4   0:06.26
>> nginx
>> >> 12760 root      20   0 2812952   1.7g   2376 S   0.0  1.4   0:05.89
>> nginx
>> >> 12757 root      20   0 2812084   1.7g   2364 S   0.0  1.4   0:05.78
>> nginx
>> >> 12707 root      20   0 2811584   1.7g   2304 S   0.3  1.4   0:02.55
>> nginx
>> >> 12759 root      20   0 2811772   1.7g   2312 S   0.3  1.4   0:05.61
>> nginx
>> >> 12694 root      20   0 2811380   1.7g   2288 S   0.3  1.4   0:02.06
>> nginx
>> >> 12711 root      20   0 2811416   1.7g   2300 S   0.0  1.4   0:02.54
>> nginx
>> >> 12686 root      20   0 2811228   1.7g   2288 S   0.0  1.4   0:01.14
>> nginx
>> >> 12710 root      20   0 2811108   1.7g   2288 S   0.0  1.4   0:02.52
>> nginx
>> >> 12752 root      20   0 2811060   1.7g   2316 S   0.3  1.4   0:04.99
>> nginx
>> >> 12748 root      20   0 2811024   1.7g   2296 S   0.3  1.4   0:05.05
>> nginx
>> >> 12745 root      20   0 2811144   1.7g   2288 S   0.3  1.4   0:04.58
>> nginx
>> >> 12699 root      20   0 2811012   1.7g   2280 S   0.0  1.4   0:02.20
>> nginx
>> >> 12728 root      20   0 2811028   1.7g   2276 S   0.0  1.4   0:03.09
>> nginx
>> >> 12690 root      20   0 2811196   1.7g   2280 S   0.3  1.4   0:01.93
>> nginx
>> >> 12754 root      20   0 2810868   1.7g   2272 S   0.0  1.4   0:04.98
>> nginx
>> >> 12688 root      20   0 2810928   1.7g   2312 S   0.0  1.4   0:01.72
>> nginx
>> >> 12732 root      20   0 2810948   1.7g   2276 S   0.0  1.4   0:03.34
>> nginx
>> >> 12687 root      20   0 2810944   1.7g   2284 S   0.0  1.4   0:01.50
>> nginx
>> >> 12703 root      20   0 2810852   1.7g   2292 S   0.3  1.4   0:02.23
>> nginx
>> >> 12739 root      20   0 2810884   1.7g   2280 S   0.0  1.4   0:04.25
>> nginx
>> >> 12738 root      20   0 2810916   1.7g   2296 S   0.3  1.4   0:04.03
>> nginx
>> >> 12717 root      20   0 2810788   1.7g   2316 S   0.0  1.4   0:02.82
>> nginx
>> >> 12742 root      20   0 2810768   1.7g   2276 S   0.0  1.4   0:04.38
>> nginx
>> >> 12684 root      20   0 2810760   1.7g   2296 S   0.0  1.4   0:01.01
>> nginx
>> >> 12682 root      20   0 2810676   1.7g   2280 S   0.0  1.4   0:00.88
>> nginx
>> >> 12715 root      20   0 2810624   1.7g   2280 S   0.0  1.4   0:02.72
>> nginx
>> >> 12734 root      20   0 2810600   1.7g   2280 S   0.0  1.4   0:03.49
>> nginx
>> >> 12736 root      20   0 2810504   1.7g   2284 S   0.0  1.4   0:03.65
>> nginx
>> >> 12731 root      20   0 2810480   1.7g   2280 S   0.0  1.4   0:03.14
>> nginx
>> >> 12723 root      20   0 2810496   1.7g   2268 S   0.0  1.4   0:02.87
>> nginx
>> >> 12737 root      20   0 2810660   1.7g   2280 S   0.3  1.4   0:03.89
>> nginx
>> >> 12741 root      20   0 2810560   1.7g   2272 S   0.3  1.4   0:04.13
>> nginx
>> >> 12681 root      20   0 2795668   1.7g    144 S   0.0  1.4   0:01.80
>> nginx
>> >>
>> >>
>> >> --
>> >> С уважением,
>> >>  Дугин Сергей                          mailto:drug at qwarta.ru
>> >>  QWARTA
>> >>
>> >> _______________________________________________
>> >> nginx-ru mailing list
>> >> nginx-ru at nginx.org
>> >> http://mailman.nginx.org/mailman/listinfo/nginx-ru
>>
>>
>>
>> --
>> С уважением,
>>  Дугин Сергей                          mailto:drug at qwarta.ru
>>  QWARTA
>>
>> _______________________________________________
>> nginx-ru mailing list
>> nginx-ru at nginx.org
>> http://mailman.nginx.org/mailman/listinfo/nginx-ru



-- 
С уважением,
 Дугин Сергей                          mailto:drug at qwarta.ru
 QWARTA



Подробная информация о списке рассылки nginx-ru