É absolutamente possível.
O mecanismo embutido no Ubuntu está disponível. Basicamente, use a ferramenta usb-creator ou o LiveUSB Creator (disponível assim que você inicializar o LiveCD) para criar um sistema LiveUSB no stick USB.
Aqui está um tutorial install-it-from-Windows .
Existem muitos posts nos fóruns do Ubuntu sobre persistência ; você vai querer verificar lá em sua pesquisa. Estas mensagens parecem particularmente úteis com 9.04:
-
Esta postagem sugere que (ao usar o LiveUSB Creator) apenas "criou uma sem nenhum espaço de persistência, então criei manualmente uma partição EXT2 chamada 'casper-rw' e na inicialização eu tinha um sistema com persistência "
Se o sistema que você está usando puder inicializar a partir do USB, isso é tudo que você precisa. Se não, use o LiveCD ou crie um disquete de inicialização (ha! - você provavelmente pode criar um boot CD em vez de um disquete ...).
Espero que ajude!