Visualização do Gloobus faz isso e webupd8 tem 2 artigos sobre isso (o segundo link também tem um vídeo). A partir do primeiro link:
Instale o PPA ...
sudo add-apt-repository ppa:nilarimogard/webupd8
sudo apt-get update
sudo apt-get install gloobus-preview
E um pré-visualizador:
Nautilus:
sudo apt-get install gloobus-sushi
nautilus -q
Nemo:
sudo apt-get install nemo-gloobus-sushi
nemo -q
Pressione um espaço após selecionar um arquivo para visualizá-lo (e outro espaço para remover a visualização). Exemplo de imagem:
Funciona somente com arquivos menores que 10 MB.