Se a aplicação em questão estiver fixada em um dos 10 primeiros botões da barra de tarefas, você pode percorrer as janelas pressionando Win + 1 - Win + 0 repetidamente.
Caso contrário, você pode usar Win + T (ou Win + Deslocamento + T ) para focar o grupo de aplicativos e, em seguida, selecionar a janela específica usando as teclas de seta.