Esqueci de mencionar, mas escolhi "Encrypted LVM" e deixei o instalador manipular o particionamento do disco. Parece que o SSH não pode ler meu diretório pessoal para verificar minha chave. Eu não investi muito tempo / esforço em configurar este servidor, então vou apenas reinstalar o sem criptografia.