Não, você não precisa instalar o Ubuntu novamente. Você pode simplesmente formatar a partição em que suas janelas residem e irá removê-lo. Use gparted
para isso. Depois de formatar a partição do windows, faça isso para removê-la do grub (menu de seleção do os) também,
sudo update-grub
sudo grub-install /dev/sda