Os túneis SSH são bastante simples. Apenas certifique-se de que o firewall não permita a saída do HTTP (isso tornaria o túnel sem sentido) e permita a saída do SSH.
Então é só uma questão de tunelamento localhost: 80 (ou qualquer que seja a porta) para uma porta local para você.
Veja um exemplo se o seu computador executa * nix:% ssh webserver.example.com -L 8080:localhost:80 -fN
Isto irá funcionar assumindo que o servidor ssh é o mesmo que o servidor web, se não for, use o ip do servidor web em vez de localhost. O -fN coloca o túnel em segundo plano, liberando o terminal novamente.
Uma vez que o túnel está ativo, você pode navegar pelo servidor no host local: 8080 em seu computador.
Se você estiver em uma máquina Windows, use algo como o PuTTY. Aqui é um bom tutorial com capturas de tela.