Você já tentou alterar a ordem de inicialização nas configurações do BIOS / UEFI?
Geralmente, você pode acessar as configurações do BIOS / UEFI pressionando DEL , F2 ou F11 logo após ligar o PC. Defina o seu HD com o Ubuntu ou a entrada EFI do Ubuntu como a primeira opção de boot e salve suas configurações.
Seu PC irá reiniciar e inicializar usando o GRUB por padrão.