Este é o WAD (Works As Designed), o Ubuntu não desmonta discos no logout, além do diretório inicial criptografado ou do diretório privado (se estiver em uso).
Você pode desmontá-los usando o botão de ejeção no Nautilus ou usando o comando umount no terminal, seguido pelo caminho em que o disco foi montado (você pode precisar usar o sudo).