Quando estiver no Rhythmbox, selecione Edit -> Preferences
, você deve ter no na guia General
-tabaixo um menu suspenso chamado Toolbar Button Labels
Tente alterar o valor dessa lista suspensa e veja se o botão de controle reaparece.
Isso deve influenciar os botões de controle no Rhythmbox e no miniaplicativo de bandeja.