Bem, há sempre o programa de ftp que vem por padrão - você provavelmente poderia baixar um navegador alternativo dessa maneira.
Se você pode instalar utilitários adicionais, há o Telnet através do instalador do Windows, assim você pode navegar pelos sites através da porta 80. (Telnet não é mais instalado por padrão no Vista e 7)
Existem muitas outras ferramentas legais , como wfetch , no entanto, eu acho que o Telnet e o ftp são os únicos programas que estão embutidos no Windows para internet que não estão ligados ao Internet Explorer.