Jason, se a sua pergunta descreve com precisão a situação, você simplesmente instalou o aplicativo do Ubuntu One para Windows no Windows 7 e ainda deve estar inicializando no Windows. O fato de você remover ou não o aplicativo deve ser bastante irrelevante. Se você não o visualizar listado no aplicativo do painel de controle para desinstalar programas, talvez seja necessário removê-lo de uma maneira diferente ou apenas ignorá-lo.
Se o que você instalou foi realmente o Ubuntu, então como você respondeu a perguntas durante a instalação determinou como ele foi carregado na máquina e se ele vive com o Windows ou se você eliminou o sistema Windows.
Em outras palavras, mais detalhes seriam necessários para fornecer uma resposta útil.