Parei de depender do ícone da bandeja.
A ferramenta RemoveDrive é muito boa e você pode
consegue remover com segurança as unidades removíveis muitas vezes depois que o ícone declara falha.
Sugira a leitura das anotações na página RemoveDrive
(e várias outras páginas do mesmo lugar)
para aumentar sua confiança nessa ferramenta.
Então, use-o se você gostar.
Eu normalmente mantenho um atalho como mostrado aqui na área de trabalho como um retorno imediato.
C:\some\path\RemoveDrive.exe U:\ -i -b
Você pode fazer isso a partir da linha de comando se a letra da sua unidade continuar mudando.