Por experiência, posso dizer que rodar o Ubuntu em um cartão SD é geralmente insuportavelmente lento. Você não chegará nem perto de um desempenho semelhante ao SSD. Isso se deve às limitações de velocidade de leitura e gravação de cartões SD e leitores de cartões.
A instalação em uma unidade flash USB oferece um desempenho pelo menos igual e, provavelmente, significativamente melhor.
Por favor, note que estou apenas falando por experiência pessoal.