Não, infelizmente isso não é possível. Não há como "atualizar" do Firefox 6 para o Firefox 4.
Isso não apenas desafia a intuição (não seria uma atualização!), mas é tecnicamente impossível também. A base de código para a versão 6 é, sem dúvida, muito diferente da base de código para a versão 4.
Faça o download e instale a versão 4 da mesma forma que você conseguiu baixar e instalar o release alfa da versão 6. Também não foi uma atualização no local. Use os mesmos métodos para contornar a política de segurança da sua empresa ou peça ao administrador para fazer isso por você.