Use um CD live do Ubuntu e execute o Gparted para alterar as partições alocadas em seu disco. Você também pode baixar o GParted e criar um CD ou drive USB inicializável dedicado. Um tutorial sobre o uso do Gparted está disponível em: link
Note que, dependendo da configuração do seu disco, você pode ter que diminuir a partição do Ubuntu primeiro para criar algum espaço não alocado, e então mover a partição do Ubuntu para a direita para que o espaço não alocado esteja imediatamente à direita do partição do windows. Você pode redimensionar a partição do Windows para usar todo o espaço não alocado. Isso pressupõe que o Windows foi carregado primeiro e ocupa a frente da unidade.