<div dir="ltr"><div><div>Пожалуйста, новые дампы и логи.<br><a href="https://ufile.io/0ony2">https://ufile.io/0ony2</a><br><a href="https://ufile.io/bgt1i">https://ufile.io/bgt1i</a><br><br>2017/06/22 15:53:55 [error] 45615#45615: *89748123 upstream timed out (110: Connection timed out) while connecting to upstream, client: 176.59.44.27, server: server, request: "POST /api/events/batch?app_id=311&uid=uid&usr_latitude=55.50582&adv_id=b309f032e4-4516-8950-cc01093bb398&usr_longitude=37.3288475&timestamp=1492954855 HTTP/1.1", upstream: "fastcgi://<a href="http://217.69.137.58:8086">217.69.137.58:8086</a>", host: "server"<br>2017/06/22 15:53:55 [error] 45611#45611: *89788909 upstream timed out (110: Connection timed out) while connecting to upstream, client: 46.146.189.93, server: server, request: "POST /api/events/batch?app_id=311&uid=uid&usr_latitude=0.0&adv_id=f341a189-59573f-a520-9c76b003d6c4&usr_longitude=0.0&timestamp=1498136049 HTTP/1.1", upstream: "fastcgi://<a href="http://217.69.137.35:8086">217.69.137.35:8086</a>", host: "server"<br><br></div><div>Есть идеи почему так может быть?<br></div><div><br></div>Таймаут поднимаю до 700, посмотрю на результат.<br><br></div>Левый модуль графита и на остальных проектах )<br></div><div class="gmail_extra"><br clear="all"><div><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr">Александр<br></div></div></div>
<br><div class="gmail_quote">16 июня 2017 г., 0:42 пользователь Evgeniy Berdnikov <span dir="ltr"><<a href="mailto:bgx@protva.ru" target="_blank">bgx@protva.ru</a>></span> написал:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">On Thu, Jun 15, 2017 at 09:07:39PM +0300, Алексанр Платонов wrote:<br>
> >  А это похоже на таймаут коннекта. Вопрос в том, почему SYN+ACK от бэкенда<br>
> >  пришёл с такой задержкой. Возможно, бэкенд перегружен.<br>
> >  Возможно, свитчи по пути перегружены трафиком.<br>
><br>
> Дампы:<br>
> RST: <a href="https://ufile.io/09s7w" rel="noreferrer" target="_blank">https://ufile.io/09s7w</a><br>
> FIN: <a href="https://ufile.io/0bkq5" rel="noreferrer" target="_blank">https://ufile.io/0bkq5</a><br>
<br>
</span> В обоих дампах время около 2017-06-14 20:41:12, т.е. вчерашний день.<br>
<span class=""><br>
> это вот эти два запроса<br>
> 2017/06/15 13:12:43 [error] 8449#8449: *729923 upstream timed out (110:<br>
> Connection timed out) while connecting to upstream, client: 128.74.129.198,<br>
> server: site, request: "GET /api/v1/product/<wbr>58a2ed54d53f3d224a6b05c5<br>
> HTTP/1.1", upstream: "fastcgi://<a href="http://217.69.137.168:8080" rel="noreferrer" target="_blank">217.69.137.168:8080</a><wbr>", host: "api.site"<br>
> 2017/06/15 13:12:43 [error] 8471#8471: *734373 upstream timed out (110:<br>
> Connection timed out) while connecting to upstream, client: 31.173.243.12,<br>
> server: site, request: "GET<br>
> /api/v1/counters/<wbr>5730243396ad843510595f43?adv_<wbr>id=D5D4F8D7-DEB7-4FE0-807E-<wbr>143651398124&app_id=iphone%<wbr>2F3782&timestamp=1497521562&<wbr>uid=uid&usr_latitude=55.<wbr>0252283782156&usr_longitude=<wbr>82.93059721079625<br>
> HTTP/1.1", upstream: "fastcgi://<a href="http://217.69.137.73:8080" rel="noreferrer" target="_blank">217.69.137.73:8080</a>"<wbr>, host: "api.site"<br>
<br>
</span> А здесь другое время, и другой день. Логи с дампами не стыкуются.<br>
<span class=""><br>
> Возможно  с RST это вторая попытка отправить пакет через RTO + некоторое<br>
> время, но из debug log nginx я не понял сколько было попыток, вроде одна.<br>
<br>
</span> Nginx не может знать, сколько было ретрансмиссий, эта информация из ядра<br>
 ему не передаётся. Но потерять в pcap-е пакеты практически невозможно.<br>
<br>
 Да, дампы странные. Однако желательна привязка к логам.<br>
<span class=""><br>
> по трем ДЦ ~ хаотично и закономерности я не вижу.<br>
> Если бы воспроизводилась в одном месте, то я бы видел максимумы ошибок,<br>
> связанные с одним хостом/дц. Ситуация была бы и на других проектах, но пока<br>
> такого не замечали.<br>
<br>
</span> Это может быть отражением того, что проблема как-то связана с конфигурацией<br>
 nginx для конкретного проекта, возможно, с "левыми" модулями.<br>
<div class="HOEnZb"><div class="h5">--<br>
 Eugene Berdnikov<br>
______________________________<wbr>_________________<br>
nginx-ru mailing list<br>
<a href="mailto:nginx-ru@nginx.org">nginx-ru@nginx.org</a><br>
<a href="http://mailman.nginx.org/mailman/listinfo/nginx-ru" rel="noreferrer" target="_blank">http://mailman.nginx.org/<wbr>mailman/listinfo/nginx-ru</a></div></div></blockquote></div><br></div>