Eu não uso Caja, mas Nautilus; De qualquer forma eu acho que eles compartilham esse comportamento:
A geração de miniaturas do Nautilus depende de ffmpegthumbnailer
, que é controlado por /usr/share/thumbnailers/ffmpegthumbnailer.thumbnailer
.
Edite-o para dizer ao ffmpegthumbnailer para gerar miniaturas também para esse tipo de arquivo