Supondo que você está falando sobre o ícone do explorador e que ele está atualmente fixado à barra de tarefas:
- Pressione Janelas + E para abrir uma janela do explorador
- Clique com o botão direito do mouse no ícone na barra de tarefas e, em seguida, clique com o botão direito do mouse no Windows Explorer e selecione "Propriedades"
- Clique em "Alterar ícone ..."
- Selecione o ícone desejado e clique em "OK" e OK fora da janela de propriedades.
- Clique com o botão direito do mouse no ícone do Explorer na barra de tarefas, selecione "Desativar este programa da barra de tarefas" e feche todas as janelas abertas do explorador.
- Pressione Windows + E para abrir uma janela do explorador e o novo ícone deve ser exibido
- Clique com o botão direito do mouse no ícone e selecione "Fixar este programa na barra de tarefas"