Sim, basta desbloquear a barra de tarefas, clicar com o botão direito na barra de ferramentas e desmarcar Mostrar título . A opção não mostra se a barra de tarefas está bloqueada.
Eu uso a barra de ferramentas Address na barra de tarefas do windows 7 usando o seguinte atalho:

Épossívelremoverotítulodabarradeferramentasexibidonafrentedacaixadeendereço?
Isso está apenas ocupando espaço na minha barra de tarefas.