O fator limitante para largura de banda é normalmente os buffers internos do próprio ssh (veja hpn- ssh ). No entanto você está falando de latência. Você precisa ter um longo e duro olhar sobre quanto da latência é inerente à rede e quanto está baixo para o ssh. Você não forneceu nenhuma informação sobre o cliente / servidor ssh que está usando. O OpenSSH (e provavelmente a maioria das outras implementações) tem o nagle desativado por padrão - o que significa que os problemas estão na sua rede.
Supondo que você eliminou MTU e Escala TCP Window , não há muito que você possa fazer sobre a latência além de olhar para links dedicados.