Quando você instala (e às vezes inicia) um player suportado, ele deve aparecer automaticamente. O meu tem agora Rythmbox e Nuvuola.
Quando eu estava usando o Skype, ele apareceu lá apenas depois que eu comecei (geralmente no painel ou no encaixe).
Você pode remover uma entrada do menu desinstalando o programa.