Assumindo que os ícones acabaram assim sem o uso de aplicativos de terceiros, isso deve resolver isso para você.
Clique com o botão direito em uma área vazia da barra de tarefas e procure no submenu Barras de ferramentas . Desmarque (clicando com o botão esquerdo) tudo que estiver lá, para que fique assim:
.n.b. Se vários itens estiverem marcados, você precisará passar por esse processo para cada item, pois clicar em um deles fechará o menu.