Uma maneira seria pressionar a tecla do Windows - que aparecerá instantaneamente na barra de tarefas.
Não parece haver nenhum hack ou configuração do registro que possa ser usado para remover o atraso, no entanto, usando um aplicativo de terceiros chamado Ativar Barra de Tarefas - você pode remover completamente o atraso de dentro das configurações.
Encontrei uma pequena redução no tempo de exibição, eu mesmo - YMMV. Este utilitário foi projetado para, de fato, aumentar o tempo de atraso, para que a barra não fosse exibida toda vez que um usuário aproximasse o mouse da borda da tela. É o freeware "emailware" e também há uma versão portátil / sem instalação disponível.