Inicialize em ubuntu os e abra o terminal pressionando ctrl + alt + t e execute os comandos abaixo nele,
sudo update-grub
sudo shutdown -r now
Após a reinicialização, seu grub exibirá o sistema operacional Windows e você poderá selecioná-lo e inicializá-lo. Os comandos acima irão reinstalar o seu grub para exibir windows e ubuntu os.