Em seu post anterior, você diz "Eu editei o gdm.conf para não iniciar".
Eu acho que pode depender de como você modificou esse arquivo, é possível que você vá para o tty7 onde o gdm iria iniciar o servidor X, mas sem o servidor X iniciado, então você tem que mudar o console para ir para digamos tty1.
Se você não usá-lo, deve ser melhor remover o pacote gdm
.