Você teria que ter criado um arquivo de persistência no seu pen drive USB para que os pacotes e documentos permanecessem no seu flash stick após cada uso. Eu acredito que ele é armazenado em um arquivo chamado squashfs e seu conteúdo só é acessível para o Ubuntu quando ele é inicializado.