Andrew Richards explicou isso em sua blog, alguns anos atrás . Abra cmd na pasta de instalação do Windbg e execute WinDbg.exe -IA
para registrar o arquivo File Association. Você também pode usar o arquivo reg fornecido, mas aqui você precisa alterar os caminhos.