Basta inicializar no disco do Windows, selecionar a unidade que deseja sobrescrever e passar pela instalação normal do Windows. Ele deve limpá-lo e instalar o Windows nele.
Embora, no Ubuntu, ele se torne tão simples de usar, você raramente precisará mexer com suas partições de disco ou abrir um terminal e, na maioria dos casos, você pode obter suporte usando a linha de comando aqui.