Você pode fazer isso sem incomodar todos os truques do registro. A maioria dos navegadores modernos tem a capacidade de torná-lo padrão.
Por exemplo, para o Google Chrome, vá para
Settings -> Default browser --> Make Google Chrome the default browser
e ele fará tudo por você.
Na verdade, meu caso é o Windows 7. E é irritante não conseguir abrir links em um navegador padrão, quando seus navegadores são portáteis.
Quando corrijo meu Windows 8.1, também posso falar sobre isso. Pode ser que eu esteja errado sobre o Windows 8 (.1). Mas não deve ser muito diferente, pode ser que algum navegador portátil mais recente da versão escolhida possa ajudar.
Se não for apenas tentar vários navegadores, e pelo menos um deles se encaixaria. Os desenvolvedores de todos os navegadores não poderiam estar enganados por não terem conseguido definir vários valores de registro de acordo com seus produtos.