Da sua descrição, também pode ser um problema de rede. Para analisar esse cenário, você poderia fazer uma sessão de ping de longo prazo com estatísticas - entre o seu PC e o servidor.
Eu favoreceria a rede como o vilão, já que os administradores provavelmente estão olhando para sar, vmstat ou iostat. E eles não vêem um problema.