Como parece que você está confortável executando comandos de terminal, talvez seja proveitoso tentar iniciar diretamente no modo de recuperação, o que evitará iniciar o servidor gráfico na inicialização.
Isso pode ser feito pressionando-se o ESC imediatamente após o sistema terminar sua saída do BIOS / POST após uma reinicialização. Isto deve abrir o menu GRUB bootloader onde você pode escolher iniciar seu sistema usando o kernel mais recente e no modo de recuperação. A inicialização dessa maneira apresentará um menu de diagnósticos, onde você poderá primeiro habilitar a rede (que deve fornecer acesso à Internet e colocar o sistema de arquivos no modo de leitura / gravação), seguido pela opção de descartar a linha de comando raiz.
Quando a rede estiver habilitada, o prompt de comando root do modo de recuperação deve permitir que você execute os comandos apt necessários para corrigir o driver nvidia.