CentOS 6.3 tarefa bloqueada por mais de 120 segundos

Question

Recentemente, recebemos alertas do Zabbix sobre o fato de nosso sistema de e-mail não estar disponível, o tempo de atividade na máquina é de 30 dias ou mais. Eu tenho rastreado os logs do Zabbix e parece que a comunicação entre o agente Zabbix & servidor falhou em responder no tempo que acionou o alerta.

Para descobrir se era um problema de rede, etc. Eu vi / var / log / messages e encontrei as seguintes entradas:

Nov 14 21:48:49 iw kernel: INFO: task zabbix_agentd:3316 blocked for more than 120 seconds.
Nov 14 21:48:49 iw kernel: "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
Nov 14 21:48:49 iw kernel: zabbix_agentd D 0000000000000003     0  3316   3311 0x00000080
Nov 14 21:48:49 iw kernel: ffff880069075c50 0000000000000086 ffffffff817a8d69 ffff880069075c68
Nov 14 21:48:49 iw kernel: ffff880486ea3000 ffff880069075c58 ffffffff8127cb66 0000000000000009
Nov 14 21:48:49 iw kernel: ffff88042085bab8 ffff880069075fd8 000000000000fb88 ffff88042085bab8
Nov 14 21:48:49 iw kernel: Call Trace:
Nov 14 21:48:49 iw kernel: [<ffffffff8127cb66>] ? vsnprintf+0x2b6/0x5f0
Nov 14 21:48:49 iw kernel: [<ffffffff814ffec5>] rwsem_down_failed_common+0x95/0x1d0
Nov 14 21:48:49 iw kernel: [<ffffffff81500056>] rwsem_down_read_failed+0x26/0x30
Nov 14 21:48:49 iw kernel: [<ffffffff8127e664>] call_rwsem_down_read_failed+0x14/0x30
Nov 14 21:48:49 iw kernel: [<ffffffff814ff554>] ? down_read+0x24/0x30
Nov 14 21:48:49 iw kernel: [<ffffffff81140511>] __access_remote_vm+0x41/0x1f0
Nov 14 21:48:49 iw kernel: [<ffffffff81144052>] ? vma_merge+0x1d2/0x3e0
Nov 14 21:48:49 iw kernel: [<ffffffff8114071b>] access_process_vm+0x5b/0x80
Nov 14 21:48:49 iw kernel: [<ffffffff811e295d>] proc_pid_cmdline+0x6d/0x120
Nov 14 21:48:49 iw kernel: [<ffffffff8115c30a>] ? alloc_pages_current+0xaa/0x110
Nov 14 21:48:49 iw kernel: [<ffffffff811e357d>] proc_info_read+0xad/0xf0
Nov 14 21:48:49 iw kernel: [<ffffffff8117b9e5>] vfs_read+0xb5/0x1a0
Nov 14 21:48:49 iw kernel: [<ffffffff810d6b12>] ? audit_syscall_entry+0x272/0x2a0
Nov 14 21:48:49 iw kernel: [<ffffffff8117bb21>] sys_read+0x51/0x90
Nov 14 21:48:49 iw kernel: [<ffffffff8100b0f2>] system_call_fastpath+0x16/0x1b

Informações do kernel:

Correio do Linux 2.6.32-279.2.1.el6.x86_64 # 1 SMP Sex Jul 20 01:55:29 UTC 2012 x86_64 x86_64 x86_64 GNU / Linux

Informação da memória:

             total       used       free     shared    buffers     cached
Mem:         24031      21497       2533          0        606      14562
-/+ buffers/cache:       6328      17702
Swap:        31999         49      31950

Estou procurando algumas orientações sobre onde começar a reduzir a causa desses problemas.

    

Answer 1

Encontrou este post, não tenho certeza se isso se aplica a você ou não. link

Quanto de CPU você tem? Parece que você tem um pouco de memória (24GB). Se o post do blog estiver correto, o sistema talvez não consiga liberar a memória do cache com rapidez suficiente para lidar com o IO que você está enviando.

Você pode definir "vm.dirty_ratio = 10" em /etc/sysctl.conf para forçá-lo a liberar mais cedo. Isso pode ajudar no seu problema.