Re: Периодические проблемы под нагрузкой

[Evgeniy Berdnikov]

On Wed, Feb 20, 2019 at 07:08:13AM -0500, waster wrote:
> Под нагрузкой периодически наблюдается такая картина:
> https://imgur.com/a/B3fOWg7
> По понятным причинам также резко подпрыгивает кол-во открытых файловых
> дескрипторов.
> 
> В error.log на cache в эти моменты иногда (но не всегда) видны несколько
> сообщений:
> --------------------------------------------------------------------------------------------------
> 
> *137407049 upstream timed out (110: Connection timed out) while connecting
> to upstream...
> ...
> *143796692 limiting requests, excess: 50.400 by zone "hlslimit"...
> --------------------------------------------------------------------------------------------------
> 
> В error.log на origin вообще тишина.
> 
> Подскажите, пожуалуйста, в чем может быть проблема? Только лишь в иногда
> нестабильной сетевой связности между cache и origin, всплесками запросов?
> Уже множество параметров было перенастроено как на origin, так и на cache,
> но успехов в повышении стабильности это не дало.

 Наблюдаемые симптомы (увеличение времени ожиданий read/write и таймауты
 на стороне клиента, увеличение к-ва файловых дескрипторов) вполне
 укладываются в гипотезу о том, что потерялась связь между cache и origin.
 На графике "Network traffic on enp7s0f0" явно виден провал по трафику.
 Поэтому нет смысла выдумывать другие возможные причины, пока не изучены
 сетевые проблемы между cache и origin.
-- 
 Eugene Berdnikov