Ao analisar os problemas de desempenho, é importante lembrar o 'big 4' :
-CPU
-Memory
-Disk
-Network -
Sou um grande fã de usar atop
para utilização de CPU e memória, iotop
para uso de disco e iftop
para tráfego de rede. Lembre-se de que essas métricas são úteis apenas em tempo real quando o servidor está sobrecarregado e enfrentando esse problema.
Qualquer um dos 4 maiores acima pode causar atrasos substanciais no processamento quando uma página é solicitada. Você mencionou que este site é um blog, mas não mencionou se o conteúdo é gerado dinamicamente, o que adicionaria outra camada a essa equação - o banco de dados. Longos tempos de resposta de consulta podem causar um efeito trickle down que resulta em um longo carregamento de página.