Есть проблема! — nginx, php-fpm, таймауты

Такая ситуация:

Есть нагруженный веб-сервер (запросов 300 в секунду), где крутится memcached, php-fpm, nginx

Вчера вечером ставл виснуть php-fpm (время зависит от нагрузки, сегодня с утра, коогда пошли пользователи стал виснуть через пару минут)

1

2011/10/29 09:12:17 [error] 3124#0: *176128 upstream timed out (110: Connection timed out) while reading response header from upstream, client: client_ip, server: server.ru, request: "POST /file.php HTTP/1.1", upstream: "fastcgi://127.0.0.1:9000", host: "server.ru", referrer: "http://server.ru/file.swf"

Раньше такое случалось, если тупил сервер БД, но это маловероятно, так как падает всё и с минимальной нагрузкой.

Для придания работоспособности я заставил его убиваться, если он тупит, в результате всё заработало. Но сейчас по даннным мунина заметно больше форков, чем обычно (/etc/php-fpm.conf)

1	<value name="request_terminate_timeout">30s</value>

Но опять же, это всё лечение симптомов. Нужно найти причину

 1
 2
 3
 4
 5
 6
 7
 8
 9
10

# netstat -an|awk '/tcp/ {print $6}'| sort | uniq -c
      2 CLOSE_WAIT
      1 CLOSING
   3390 ESTABLISHED
     32 FIN_WAIT1
    161 FIN_WAIT2
      5 LAST_ACK
     17 LISTEN
     26 SYN_RECV
    733 TIME_WAIT