Eu tive um problema semelhante. Para corrigir isso, percebi que não estava usando o groupinstall corretamente. Eu fiz um "sudo yum grouplist" para identificar o pacote gráfico correto do KDE que eu precisava. Então eu fiz "sudo yum groupinstall 'KDE Desktop'".