Então você formatou as partições do Ubuntu. Mas ainda tem entrada no menu de inicialização. Não tem problema, você pode usar o EasyBCD para remover a opção de inicialização. Possui licença não comercial gratuita para uso pessoal. As instruções para usar o software também estão disponíveis no site.
link OU
Botão do Windows + R para iniciar o RUN. Digite "msconfig" e pressione enter. Selecione a aba de inicialização. Apagar todas as entradas que não sejam as janelas 10.