Sim, você pode instalar o Ubuntu em um USB, mas ele não será transferido para outros sistemas. Estou executando uma instalação do Lubuntu a partir de um pendrive agora. Basta inicializar um disco de instalação e escolher instalar, então, quando chegar a hora de escolher o tipo de instalação, escolha "algo mais" e especifique que sua instalação seja feita no pendrive (por exemplo, "/" em "sdb1" use como "ext4" ), certifique-se de especificar o bootloader para ele também (por exemplo, "sdb"). O Ubuntu não se importa se é uma unidade flash, ssd ou disco rígido.
Para descobrir o nome correto do dispositivo para a sua unidade USB, você pode abrir um terminal e executar
lsblk
Isso listará todas as unidades anexadas, uma das quais (geralmente /dev/sdaX ) é seu disco rígido interno e uma (geralmente /dev/sdb1 ) será o pendrive.
Instruções oficiais de instalação do Ubuntu (são para o 13.10, mas são as mesmas):