Remover completamente um ambiente de desktop nunca é recomendado, já que ele pode quebrar pacotes dos quais o Ubuntu ou outros DEs dependem. Na verdade, não é realmente recomendado que você instale uma segunda DE, em primeiro lugar. Se você instalar um DE, você deve estar realmente preparado para reinstalar o Ubuntu ou apenas manter o DE instalado.
Você pode usar o comando abaixo para remover a maioria / todos os pacotes do Kubuntu / Plasma / KDE. Por favor, tenha em mente que as coisas podem quebrar.
sudo apt-get purge '^kde' '^kubuntu' '^plasma'