A opção -P fez o download de todos os arquivos para o diretório específico, mas criou dois novos diretórios dentro do diretório de destino.
Os arquivos foram enviados para /home/user/xml/192.168.1.1/public_html /
Então eu tentei com a opção -P e a opção -e funcionou do jeito que eu precisava.
O código final se parece com isso
wget -m -nd --user=user --password=password -r -l1 --no-parent -A.rss ftp://localhost/public_html/ -P /home/user/Desktop/xml/