Para ícones agrupados set (clique com o botão direito do mouse na barra de tarefas - > Propriedades - > "Botões da barra de tarefas" para "Sempre combinar, ocultar rótulos") você pode manter pressionada a tecla shift e clicar com o botão direito do mouse no grupo.
Isto revela os itens de menu 'Mostrar janelas empilhadas' e 'Mostrar janelas lado a lado'