Como baixar uma lista de arquivos com a possibilidade de retomar?

Question

Eu tenho uma lista de URLs para alguns arquivos para download. Estes são URLs reais que terminam com nomes de arquivos completos na forma de http://domain.com/foobar.jpg .

Todos eles são armazenados em um arquivo chamado urls.txt .

Como posso baixá-los, com a possibilidade de retomar esses downloads?

    

Answer 1

wget - disponível para a maioria dos Unixes (e se você procurar muito, Windows):

wget -c http://domain.com/foobar.jpg

curl - disponível para quase qualquer sistema operacional de computador :

curl -C - -O http://domain.com/foobar.jpg

curl -C - --remote-name-all http://domain.com/foo.jpg http://domain.com/bar.jpg

Para percorrer um conjunto de arquivos armazenados em urls.txt :

while read line; do wget -c "$line"; done < urls.txt