Verifique a carga da CPU e a utilização da memória no servidor.Pode ser devido à alta carga / memória da CPU.Você está enfrentando esse problema.Você pode usar free
uptime
vmstat
top
e outras ferramentas para descobrir e também verifique tail -40 /var/log/auth.log
para mais informações.