Você está cavando no lugar errado :-) Se você removê-lo dos recursos do Windows, ele simplesmente removerá o Internet Explorer completamente. Você não quer isso.
Em vez disso, vá ao Painel de Controle - > Programas e recursos - > Desinstalar um programa. Em seguida, clique no link "Visualizar atualizações instaladas" à esquerda. Você deve ver o IE 11 nessa lista. Remova isso, e ele irá rolar de volta para o que estava nele antes do IE 11 ser instalado.
Cenário de pior caso, você terá que fazer isso várias vezes (uma vez para o IE 10, o IE 9 e, finalmente, o IE 8)