Não é perfeito, mas se você pressionar Ctrl e clicar no ícone do aplicativo na barra de tarefas, ele trará a janela usada mais recentemente para frente. Clicar novamente traz o próximo avanço mais recente e assim por diante.
tl; dr Pressione Ctrl e clique no ícone do Explorer algumas vezes rapidamente.