Não, não é possível. Existe um bug marcado para ele (sem nenhuma ação nele desde 2010) e um tópico dos fóruns do Ubuntu de 2006 sem resposta. Então, não seria minha resposta.
Mas há uma alternativa: use "visualizador" e abra a lixeira a partir dele. Ele mostrará uma prévia no painel direito.