Quando estiver no Rhythmbox, selecione Edit -> Preferences , você deve ter no na guia General -tabaixo um menu suspenso chamado Toolbar Button Labels
Tente alterar o valor dessa lista suspensa e veja se o botão de controle reaparece.
Isso deve influenciar os botões de controle no Rhythmbox e no miniaplicativo de bandeja.