Descobri isso. Para remover eu fiz isso:
yum remove rpmforge-release-0.5.2-2.el5.rf.x86_64
E para adicionar o novo repositório para o EL6 eu fiz o download e fiz isso:
rpm -ivh rpmforge-release-0.5.2-2.el6.rf.x86_64.rpm
Estou executando o CentOS 6.2 e instalei o RPMforge EL5 por engano e preciso desinstalá-lo e instalar o RPMforge para EL6. Como posso fazer isso?