Dê uma olhada no seu php5-fpm.conf, você pode ter atingido o limite pm.max_children, que é também a quantidade de solicitações simultâneas que seu servidor pode manipular.
esse limite pode ser facilmente alcançado se você tiver scripts que possam gerar processos (cuidado com os zumbis!) ou se você tiver solicitações de tempo de execução longas