Use o parâmetro -L para o SSH para criar um túnel e redirecionar a porta 3306 (porta do MySQL).
ssh -f me@ssh-server -L 3306:ssh-server:3306 -N
Em seguida, basta conectar localmente como faria no servidor ssh. Se você está no Windows localmente, os parâmetros são praticamente os mesmos para plink .