Você precisa reconstruir o cache de ícones. Para fazer isso, abra o gerenciador de tarefas, encerre o processo explorer.exe, execute cmd.exe e digite:
cd /d %userprofile%\AppData\Local
del IconCache.db /a
exit
Finalmente, execute o explorer.exe