Perguntas sobre 'wget'

O GNU Wget (ou apenas wget) é um programa baseado em linha de comando para baixar conteúdo da Internet usando HTTP, HTTPS e FTP.
2
respostas

O que é o “artigo de 2001” para bloquear “programas de recuperação automatizada” referidos pela página do manual do wget?

A página wget man indica isso, na seção referente ao parâmetro --random-wait : Some web sites may perform log analysis to identify retrieval programs such as Wget by looking for statistically significant similarities in the t...
09.11.2015 / 15:17
3
respostas

Como baixar arquivos e pastas do Onedrive usando o wget?

Como usar o wget para baixar arquivos do Onedrive? (e arquivos em lote e pastas inteiras, se possível)     
17.08.2015 / 16:05
2
respostas

Executando milhares de processos em segundo plano em paralelo no script bash

Estou executando milhares de processos de plano de fundo curl em paralelo no seguinte script bash START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END...
07.11.2013 / 16:53
5
respostas

Como você pára o 'wget' depois que ele recebe um 404?

Se você usar a expansão de chave com wget , poderá buscar imagens numeradas sequencialmente com facilidade: $ wget 'http://www.iqandreas.com/sample-images/100-100-color/'{90..110}'.jpg' Ele obtém os 10 primeiros arquivos numerados 90.j...
22.07.2014 / 06:06
3
respostas

Como usar o wget para fazer o download de sites de hospedagem?

O wget é uma ferramenta muito útil para fazer download de material na Internet rapidamente, mas posso usá-lo para fazer download de sites de hospedagem, como FreakShare, IFile.it Depositfiles, Uploaded, Rapidshare? Se sim, como posso fazer isso?...
13.07.2012 / 16:54
2
respostas

Erro "Malformed patch" ao aplicar o diff para wget source com patch

Eu gostaria de aplicar este patch , então copiei o código a partir de "Index: src / options.h" e terminando com "+ @ item" e coloque-o em um novo arquivo criado na pasta de código fonte de wget . Então eu fiz: $ patch -p0 < name_of_patc...
14.01.2012 / 16:02
1
resposta

Como resolver os cabeçalhos 'last-modified' em falta?

Estou a executar wget da seguinte forma: wget --mirror --adjust-extension --convert-links --no-cookies http://tshepang.net -o log-main Eu recebo várias mensagens: Last-modified header missing -- time-stamps turned off. Suponho...
14.03.2011 / 09:22
7
respostas

Existe uma maneira de usar o curl interativamente? Ou há uma shell curl / wget interativa?

Imagine algo assim: $ curlsh http://www.example.org > GET /foo/bar/bam ...output here... > POST /thing/pool ... ... result here.... existe uma ferramenta que me permite fazer isso?     
16.10.2012 / 00:33
2
respostas

Faça o download da lista de arquivos, se eles ainda não existirem

Se eu tiver uma lista de URLs separados por \n , há alguma opção que eu possa passar para wget para baixar todas as URLs e salvá-las no diretório atual, mas somente se os arquivos ainda não existirem ?     
11.04.2012 / 10:17
5
respostas

Não é possível wget do github, erro de handshake sslv3

Temos um script que baixa segurança de mod do github que começou recentemente a falhar. Os servidores executam o CentOS 6, mas o RHEL 6 provavelmente tem o mesmo problema. A saída é: # wget https://github.com/downloads/SpiderLabs/ModSecurity/...
22.07.2014 / 17:02