Você pode usar os jumplists para isso. Clique com o botão esquerdo do mouse no ícone do Chrome na barra de tarefas e, em seguida, sem soltar o botão, arraste para cima. Neste ponto, para o Chrome, você pode liberar o botão sobre o terceiro item da parte inferior, nomeado após o atalho (como "Chrome"), ou o quinto item acima, em subcategorias Tarefas "Novo Janela ".
Observe que o item da lista, se houver, o botão esquerdo será liberado, será considerado "clicado", portanto, tenha cuidado para não liberar "Fechar todas as janelas" (a menos que seja sua intenção). Para evitar isso, o botão esquerdo pode ser clicado sobre o ícone na barra de tarefas, o ponteiro arrastado para cima e longe do jumplist que aparecerá e, em seguida, o botão liberado, com o ponteiro NÃO sobre o recém-exibido jumplist. Então, o item requerido pode ser clicado normalmente.
EDIT: Uma maneira mais simples de exibir o jumplist é clicar com o botão direito do mouse no ícone do Chrome na barra de tarefas, conforme indicado em outra resposta.