Algumas distros de peso pena que são projetadas para rodar totalmente com memória RAM irão carregar tudo na memória. Nesse caso, você provavelmente poderia sobrescrever a unidade flash de origem (embora eu nunca tenha testado isso). Distros não residentes em RAM referem-se novamente à fonte (se você executar uma sessão ao vivo a partir de um DVD, verá que ela se refere continuamente ao DVD).
Você pode passar por alguns obstáculos para fazer isso se tiver muita memória RAM ou pedir algum espaço de trabalho no disco rígido. Você também pode abordar o problema por meio de várias partições em uma unidade flash grande (instalar em uma partição diferente e, em seguida, reutilizar a que você instalou). Qualquer uma dessas abordagens exigiria alguma fluência com o Linux.
Se o único problema é que você tem apenas uma porta USB, a solução mais fácil é obter um hub USB. Eles são baratos e você provavelmente terá outras necessidades para portas adicionais. Então você pode usar uma unidade flash para o instalador e instalar em outra unidade flash.