wget vários arquivos PDF de links

Question

Eu gostaria de baixar arquivos PDF para determinados termos de pesquisa dos arquivos da CIA. Por exemplo, para "Vietnã", o URL é link .

Os arquivos PDF podem ser visualizados depois de clicar em cada link, é possível baixar os arquivos PDF programaticamente, modificando wget -A pdf https://www.cia.gov/library/readingroom/search/site/Vietnam

Obrigado!

    

Answer 1

Talvez isso possa ajudar!

Primeiro, armazene todos os arquivos de download ou URLs em um arquivo de texto como:

$ cat > download-file-list.txt

URL1

URL2

URL3

URL4

echo "Digite o texto"

text = $ 1

cat URLs.txt | grep -i $ text > /tmp/new.txt

wget -i /tmp/new.txt