Você pode instalar o Ubuntu diretamente no seu stick USB. Basta especificá-lo durante a instalação como a unidade de destino. Você pode então inicializar a partir do seu stick USB e instalar todo o tipo de software que você precisa.
Então, quando você está em um novo computador, basta inicializar a partir do seu stick USB. Dessa forma, você tem todo o seu ambiente com você, nem mesmo copiando um único arquivo para o computador que está usando.
Desta forma, você tem flexibilidade e segurança.