Para remover a janela, você precisa usar o utilitário de disco ou Gparted para formatar a partição em que o Windows está.
Uma vez feito isso, abra um Terminal (usando Ctrl + Alt + T) e use o seguinte comando
sudo update-grub
Isso atualizará o grub e removerá a entrada do Windows.