Você tem que modificar sua ordem de inicialização nas configurações da BIOS. Infelizmente, não posso dizer as etapas exatas porque cada tipo de máquina possui sua própria interface de bios. Se você fornecer uma foto dela, talvez eu possa ajudar melhor.
Acesse suas configurações e procure por algo como " ordem de inicialização " ou " opções de inicialização ", provavelmente em "opções avançadas". Você deve ver a partição do Windows (ou talvez o disco rígido) listada acima do Ubuntu. Mova o Ubuntu para ser a primeira opção, salve e saia, e tudo ficará bem.
Às vezes, não diz qual partição tem qual sistema operacional, então você precisa encontrar uma maneira de saber. Tente identificar pelos tamanhos das suas partições.
comentário se alguma coisa parece incerta ...