Basicamente você não pode recuperar seu cartão SD se você formatar seu telefone.
Android armazena a chave de criptografia para o seu cartão SD no armazenamento de confiança, que é basicamente apagar na redefinição de fábrica.
Você deve ser capaz de formatar seu sdcard com gparted, mas você precisaria remover a tabela de partições antes e recriá-la.
Também o cartão SD não é confiável e a unidade defeituosa é silenciosa.