Encontrei a resposta eu mesmo. Se a caixa de seleção Usar notificação de inicialização (mostrada na imagem abaixo) no inicializador estiver marcada, isso acontece. Você pode acessar o menu para editar os lançadores clicando com o botão direito do mouse no botão Xubuntu e selecionando Editar menus