wget arquivos por padrão somente a partir de diretórios especificados recursivamente

Question

Eu preciso baixar em uma base horária (às vezes com mais freqüência), arquivos que estão sendo escritos em segmentos de 24 horas. Os arquivos nos quais estou interessado estão em subdiretórios específicos que estou tentando especificar com -I list , mas isso não funciona por algum motivo.

Se eu não especificar diretórios, os arquivos precisam ser baixados com a opção -A acclist , mas acabo com muitos diretórios vazios que estão sendo criados porque existem no host.

minha linha atual diz:

wget -np -nH --cut-dirs=X -c -N -r -l 0 \
     -I /dir1,/dir2,...,/some_dir -A acclist \
     http://hostname/X_sub_directories/

Como faço para baixar somente os arquivos que eu quero e crie somente a hierarquia de diretórios para esses arquivos?

    

Answer 1

você pode adicionar um comando post process para eliminar os diretórios vazios criados.

wget -np -nH --cut-dirs=X -c -N -r -l 0 \
     -I /dir1,/dir2,...,/some_dir -A acclist \
     http://hostname/X_sub_directories/    \
     &&  find -depth -type d -empty -exec rmdir {} \;