sudo apt-get autoremove gnome*
Isso definitivamente não é o caminho para remover o gnome ou qualquer outro ambiente de desktop. Desde que você instalou o xubuntu, você pode querer reinstalar o pacote de desktop xubuntu para instalar o que você removeu com o primeiro comando.
sudo apt-get install xubuntu-desktop
Se você estiver planejando experimentar outro ambiente de desktop no futuro, verifique o link