Bem-vindo ao Ask Ubuntu.
Quando você clicou no X no canto superior direito, acabou de fechar a janela do programa, não saiu do programa. Isso permite que você toque música sem ter a janela aberta, um recurso bastante útil, na verdade.
Basta iniciar o Rythmbox novamente e ele voltará para o local em que você o deixou!