A solução no meu caso foi muito simples. Tudo o que precisei fazer foi acessar a configuração da BIOS, encontrar o menu Boot e alterar a ordem dos itens de inicialização. Eu coloquei o Windows Boot Manager antes do Ubuntu e agora as coisas funcionam bem. :)