Isso acontece porque o SSH não sai se houver conexões pendentes passando pelo encapsulamento / proxy.
Se eu sair do navegador (feche todas as janelas), o SSH sai normalmente. Todas as conexões TCP e X11 precisam ser fechadas antes de sair da sessão SSH.
Não encontrei opções para alterar isso, então presumo que não podemos fazer nada para evitar esse comportamento.