Neste, o que o status do apache diz:
Current Time: Sunday, 23-Dec-2012 05:13:40 CST
Restart Time: Saturday, 22-Dec-2012 13:38:12 CST
Parent Server Generation: 9
Server uptime: 15 hours 35 minutes 28 seconds
Total accesses: 3444470 - Total Traffic: 2.1 GB
CPU Usage: u40.86 s113.4 cu748.01 cs0 - 1.61% CPU load
61.4 requests/sec - 38.9 kB/second - 649 B/request
110 requests currently being processed, 0 idle workers
Eu aumentei a conexão máxima e o servidor máximo em whm para 1500 e 3000, respectivamente.
O servidor usa muito o disco rígido para armazenar em cache. Tem apenas 10 mbps de conexão. No entanto, eu não me incomodo em aumentá-lo porque ele só tem 38,9 kB / segundo.
Se de fato o gargalo da garrafa é IO, posso verificar?
O servidor também enrola muito outros sites e armazena em cache o resultado.
O servidor é muito responsivo, mas há um pouco de latência.
O IO parece ser o problema: iostat -xdk 1 20
Device: rrqm/s wrqm/s r/s w/s rkB/s wkB/s avgrq-sz avgqu-sz await svctm %util
sda 1.81 413.86 8.63 201.33 190.15 2463.45 25.28 46.85 223.00 3.79 79.68
sdb 0.00 0.00 0.00 0.00 0.02 0.00 8.07 0.00 0.68 0.68 0.00
sdd 0.00 0.00 0.00 0.00 0.02 0.00 8.07 0.00 0.73 0.72 0.00
sdc 0.00 0.00 0.00 0.00 0.02 0.00 8.07 0.00 0.78 0.78 0.00
dm-0 0.00 0.00 1.94 140.75 49.18 562.97 8.58 23.97 168.00 3.88 55.35
dm-1 0.00 0.00 0.00 0.00 0.02 0.00 8.00 0.00 6.65 2.25 0.00
dm-2 0.00 0.00 8.52 475.11 140.85 1900.43 8.44 47.55 98.32 1.63 78.97
Device: rrqm/s wrqm/s r/s w/s rkB/s wkB/s avgrq-sz avgqu-sz await svctm %util
sda 0.00 292.00 6.00 131.00 244.00 1668.00 27.91 5.14 6.53 2.24 30.70
sdb 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
sdd 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
sdc 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
dm-0 0.00 0.00 0.00 165.00 0.00 660.00 8.00 5.14 3.37 0.21 3.40
dm-1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
dm-2 0.00 0.00 5.00 394.00 236.00 1576.00 9.08 1.55 3.92 0.67 26.70
Esse% util geralmente vai para 100%. Então, isso parece ser o gargalo.
O Vmstat não parece ser o problema:
root@host [/var/log]# vmstat 1 20
procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu-----
r b swpd free buff cache si so bi bo in cs us sy id wa st
12 21 0 1148732 1160660 25192080 0 0 12 155 12 16 24 17 33 26 0
15 0 0 1281500 1160680 25193120 0 0 44 4568 15117 5501 31 19 24 27 0
12 3 0 1313904 1160684 25193728 0 0 104 1576 15960 5996 32 22 45 1 0
7 10 0 1322328 1160692 25194140 0 0 16 3024 14354 5274 28 19 20 33 0
6 12 0 1251420 1160704 25194848 0 0 96 452 13551 5208 24 19 32 26 0
20 0 0 1312052 1160708 25195592 0 0 76 4092 14885 5727 28 19 50 3 0
3 0 0 1341072 1160728 25196652 0 0 456 3888 13056 5113 24 15 57 4 0
6 1 0 1302052 1160728 25197448 0 0 188 936 11235 4372 20 15 66 0 0
11 9 0 1267768 1160744 25197872 0 0 16 2388 14423 5160 26 20 34 21 0
5 0 0 1355152 1160748 25198496 0 0 36 504 12269 5302 19 14 52 15 0
8 0 0 1323712 1160752 25199456 0 0 52 4032 12713 4779 22 16 61 0 0
7 0 0 1350484 1160760 25199872 0 0 72 2788 13692 5086 25 17 54 4 0
6 3 0 1334872 1160760 25200320 0 0 8 1088 12882 5193 23 17 60 0 0
6 10 0 1266724 1160772 25200724 0 0 24 1940 13067 4705 25 19 39 17 0
6 0 0 1315404 1160776 25201176 0 0 28 1428 11883 4914 19 14 46 21 0
11 0 0 1309244 1160784 25201724 0 0 0 2612 13001 4905 25 17 58 0 0
4 0 0 1349536 1160796 25202204 0 0 12 2240 13124 4900 24 17 58 2 0
12 1 0 1322520 1160800 25202964 0 0 464 1268 13991 5733 26 19 54 0 0
5 12 0 1301112 1160804 25203492 0 0 36 2172 13427 4956 25 17 38 20 0
3 1 0 1374288 1160808 25203780 0 0 96 772 13360 5692 24 16 35 25 0
O mpstat parece bem
root@host [/var/log]# mpstat -P ALL
Linux 2.6.32-279.19.1.el6.x86_64 (host.buildingsuperteams.com) 12/23/2012 _x86_64_ (16 CPU)
06:17:20 AM CPU %usr %nice %sys %iowait %irq %soft %steal %guest %idle
06:17:20 AM all 24.23 0.10 16.48 25.59 0.01 0.31 0.00 0.00 33.29
06:17:20 AM 0 24.18 0.09 17.00 34.98 0.00 0.16 0.00 0.00 23.59
06:17:20 AM 1 34.84 0.02 28.32 17.70 0.00 3.39 0.00 0.00 15.74
06:17:20 AM 2 26.35 0.04 20.08 26.29 0.00 0.01 0.00 0.00 27.22
06:17:20 AM 3 19.17 0.03 15.51 29.01 0.00 0.05 0.00 0.00 36.22
06:17:20 AM 4 17.64 0.28 9.33 35.08 0.00 0.26 0.00 0.00 37.42
06:17:20 AM 5 31.61 0.08 24.72 17.62 0.00 0.05 0.00 0.00 25.91
06:17:20 AM 6 24.38 0.07 19.06 20.42 0.00 0.03 0.00 0.00 36.04
06:17:20 AM 7 19.59 0.04 12.55 22.29 0.00 0.02 0.00 0.00 45.50
06:17:20 AM 8 14.21 0.12 8.60 38.27 0.00 0.44 0.00 0.00 38.36
06:17:20 AM 9 34.76 0.20 22.08 23.52 0.19 0.27 0.00 0.00 18.98
06:17:20 AM 10 26.13 0.06 16.03 22.77 0.00 0.01 0.00 0.00 35.00
06:17:20 AM 11 20.32 0.08 10.69 24.18 0.00 0.01 0.00 0.00 44.72
06:17:20 AM 12 16.99 0.21 8.50 35.72 0.00 0.17 0.00 0.00 38.40
06:17:20 AM 13 31.21 0.08 23.08 18.30 0.00 0.01 0.00 0.00 27.32
06:17:20 AM 14 25.72 0.06 16.95 21.02 0.00 0.01 0.00 0.00 36.25
06:17:20 AM 15 20.60 0.09 11.18 22.40 0.00 0.01 0.00 0.00 45.73
Eu registrei um ticket no cpanel.
O cara competente me disse que o problema é que o kjournald escreveu 5-10MB de arquivos a cada vez.
Eu não sei ao certo por que ele escreveu tanto.
Eu mudei para o SSD e isso funciona.
Basicamente eu preciso executar iostat -o -a e ver que o kjournald é o culpado.
Isso faz com que muito IO escreva que a utilização do disco é sempre 100% por causa disso.
iotop é uma ferramenta muito boa para entender o uso de I / O em sua máquina e o que todos os processos estão fazendo.
Para instalar em sabores de rhel / centos
# yum install iotop -y
Para sabores como o Ubuntu:
# apt-get install iotop
Você nunca deve usar o apachectl para medir o desempenho do sistema. Isso é do ponto de vista do apache, que pode estar completamente errado em relação ao desempenho do restante do sistema operacional.
iostat, parte do pacote sysstat pode medir o desempenho do io. Se você quiser descobrir qual processo específico está usando o io, você também pode usar o iotop (disponível através do repositório EPEL - no entanto, eu diria "apache"). De iostat, você quer o menor possível util% que, por sua vez, lhe dá um valor muito baixo de await .
Seu mpstat NÃO parece estar bem. Novamente, você está mostrando um alto uso de IO ( %iowait ). Para sites em geral, você quer que o iowaits tenha menos de 1% de ser bem responsivo. Você também está usando uma taxa de uso razoavelmente alta do sistema para um ambiente típico do apache. Mas não há dados suficientes para descobrir por que no momento.
Embora não seja parte do que foi perguntado, você deve se familiarizar com o uso do top como sua ferramenta de diagnóstico mais básica do sistema, pois ele dará uma visão geral de todos os aspectos do sistema. A parte mais importante da saída principal está disponível literalmente no topo da saída (que você ironicamente deixou de fora em seu pastebin).
Por último, se você quer dizer maxclients pela configuração "server máximo" do seu apache. 3000 é alto demais para qualquer sistema no mundo. Eu não acho que até mesmo o sistema de meio milhão de dólares seria capaz de lidar com muitos processos apache. Você ficaria em apuros se o apach decidir aumentar a contagem de servidores por qualquer motivo. Os números ideais, no entanto, só podem ser medidos através do teste da aplicação específica sob a máquina específica. Basicamente, a quantidade máxima de memória do servidor * que cada servidor usa deve ser igual ao total de RAM disponível (sem incluir o swap, pois você não quer trocar o swap o tempo todo, também como total disponível para o apache, ou seja, após o sistema operacional outros serviços, etc.).
110 requests currently being processed, 0 idle workers
...
I have increased the maximum connection and maximum server in whm to 1500 and 3000 respectively
Como Peter diz que há muitas IOs acontecendo aqui - mas não acho que esse seja o único problema. Por que o seu servidor não tem muitos funcionários ociosos? 16 núcleos? Esta é uma configuração ruim. Não faz sentido usar grande ferro para webserving. Definir o limite do servidor muito maior do que o maxclients não faz muito sentido. Parece que algo está restringindo o número de threads do apache - precisamos ver quais são suas configurações principais no httpd.conf
Eu suspeito que o irqbalancing não seja o ideal. Parece que a carga de trabalho do aplicativo é distribuída uniformemente.
Why my server has high load despite mere 1.5% CPU usage
Mas você não fornece métricas para carregamento.
Como Peter diz, você deve começar olhando para o topo.
The server also curl other sites a lot and cache the result....Server is very responsive but there is a little latency.
Então, a latência é devido ao acesso remoto? Algo mais?
Você está dizendo que há um problema aqui - mas sem saber qual é o problema que você está tentando resolver, é difícil dar qualquer conselho. Certamente há muitas gravações acontecendo e o padrão de dados sugere muitos pequenos pedaços de dados (e similarmente seu tráfego HTTP parece estranho), mas sem saber muito mais sobre o que está acontecendo aqui é impossível aconselhá-lo.
Tags cpu-usage