Existe uma linha de comando no console do Windows que faz rmdir -p /dir/
rmdir -p /dir/
Citando o manual:
-p, --parents Remove explicit parent directories if being emptied
Tags command-line windows