Se você quer dizer que tem 2 partições , uma para cada sistema operacional, recomendo o uso de um live USB ou CD e reduzindo o tamanho da partição ext4 original, agora , você vai acabar tendo algum espaço não alocado , o que você vai fazer é configurar um NTFS e instalar janelas lá.
Seria minha recomendação pessoal criar não 1, mas 2 partições NTFS, o motivo é que você pode fazer backup de seus dados em uma partição NTFS (filmes, arquivos, etc), sem depender de um SO para gerenciar isso, você pode ter dual boot com o Ubuntu, o Windows e todos os seus dados em outra partição, e caso algo aconteça e você precisar de uma instalação limpa, você não perderá todos os seus dados.
Espero que esta resposta seja sua amiga, conte-nos como foi.
Nota: Quando eu quero dizer usar um USB ou CD ao vivo, quero dizer, se você tem o CD USB ou Ubuntu, basta colocá-lo em seu computador e inicializá-lo, e selecionar a opção ao vivo (como para testá-lo), que lhe dará acesso ao Gparted e então você pode fazer o que precisa fazer, desculpe se eu não fosse específico aqui.