Não, eu não penso assim. Você terá que reinstalar todo o sistema operacional (a partição raiz, para ser mais preciso). Os pacotes e o kernel terão que voltar para a versão de 32 bits. No máximo, você pode manter o mesmo diretório home, para não perder suas configurações, favoritos, músicas, fotos, etc.