O subcomando recomendado yum downgrade é útil apenas para fazer o downgrade de alguns pacotes para a versão anterior ou específica de sua escolha.
O que você deve fazer é verificar yum history output e identificar a transação problemática e, em seguida, executar yum history undo no ID da transação, o que reverterá essa transação. Isso também é explicado em algumas perguntas existentes, verifique Existe um comando tudo-em-um para o RPM fazer o downgrade de um pacote para uma versão mais antiga?
e também Remover completamente todos os pacotes que eu instalei?