rhythmbox-folderview Ajudará você a tocar todas as músicas que estão em uma determinada pasta.
Mas o problema é que só é aplicável aos arquivos que podem ser reproduzidos no player do rhythmbox.
Para instalar este plugin: (Ubuntu 9.10, 10.04 e 10.10)
sudo add-apt-repository ppa:zedtux/rhythmbox-folderview
sudo apt-get update
sudo apt-get install rhythmbox-plugin-folderview
Para instalar esta última versão do Ubuntu, você pode baixar a fonte e instalar
Mais informações sobre esse plug-in podem ser encontradas aqui