pode ser possível que o GRUB não esteja instalado corretamente no seu PC ou esteja inicializando diretamente do USB.
ubuntu também pode ser instalado dentro do windows se você não tiver nenhuma partição selecionada ou pode ser outra unidade. agora você pode usar o software easyBCD que é uma ferramenta muito boa para inicializar e você não precisa de USB para inicializar.
Dowload Software Easybcd é gratuito para instalação do usuário doméstico, abra-o você verá adicionar nova entrada clique nele vá para a aba linux add entry clique em select "GRUB2" edite o menu de boot selecione a opção timeout apropriada e salve a configuração
Faça o download aqui: link
para mais uso, assista aos vídeos do youtube do easyBCD.