Perguntas sobre 'wget'

O GNU Wget (ou apenas wget) é um programa baseado em linha de comando para baixar conteúdo da Internet usando HTTP, HTTPS e FTP.
2
respostas

Há alguma boa ferramenta além do SeleniumRC que possa buscar páginas da Web, incluindo conteúdo pós-pintado por JavaScript?

Uma grande falha de curl é que mais e mais páginas estão tendo seu conteúdo principal pintado por uma resposta JavaScript AJAX que ocorre após a resposta HTTP inicial. curl nunca pega esse conteúdo pós-pintado. Portanto, para buscar es...
28.04.2011 / 12:15
3
respostas

O caminho mais curto para baixar do GitHub

Isto é, como faço o download de várias ramificações mestras do GitHub, e pretendo ter um script mais bonito (e talvez mais confiável?). wget -P ~/ https://github.com/user/repository/archive/master.zip unzip ~/master.zip mv ~/*-master ~/dir-...
04.02.2018 / 13:00
2
respostas

Diz ao wget para não spider URL correspondente a um padrão?

Eu quero testar como meu site se comportaria ao ser spidered. No entanto, desejo excluir todos os URLs que contenham a palavra "página". Eu tentei: $ wget -r -R "*page*" --spider --no-check-certificate -w 1 http://mysite.com/ O sinalizado...
11.06.2014 / 05:03
3
respostas

Como posso fazer o download de um arquivo de um servidor FTP e depois excluí-lo automaticamente do servidor depois que o download for concluído?

Na linha de comando, quero baixar um arquivo de um servidor FTP. Quando o download for concluído, quero que o arquivo seja excluído no servidor. Existe alguma maneira de fazer isso? Originalmente eu considerei wget, mas não há nenhuma razão p...
17.03.2015 / 20:39
3
respostas

Faça o download de vários URLs de uma só vez

Estou ciente de wget -i como uma maneira de fazer o download de uma lista de URLs. O único problema é que preciso passar alguns dados POST diferentes para cada um, o que funciona para URLs únicas usando wget --post-data= , mas não para list...
11.02.2014 / 01:55
2
respostas

wget não suporta https

Desejo fazer o download de https://example.com usando o comando wget , mas ele diz "protocolo não suportado / não reconhecido". Eu tentei usar o --secure protocol='' , mas isso não funciona. Eu baixei o arquivo tar do GNU wget e tentei co...
19.07.2015 / 16:50
1
resposta

Wget: converte links e evita baixar novamente os arquivos já buscados?

Estou transferindo dados espalhados por vários arquivos que não são alterados depois de publicados. Portanto, --timestamping não é bom o suficiente, porque está constantemente verificando qualquer recurso que seja alterado, o que é, no meu...
04.01.2015 / 09:29
4
respostas

Usando sed para adicionar um URL ao início de cada linha

Eu tenho o URL (veja abaixo) de uma determinada página da web que lista muitos diferentes versões de um pacote de software. URL=http://ftp.gnu.org/gnu/wget/ O seguinte one-liner me traz a última versão do tar ball e sua assinatura arquivo...
24.02.2014 / 07:27
1
resposta

Wget não pode validar https://ftp.gnu.org?

Estou trabalhando no Solaris e tentando atualizar o Git construindo o Git e todas as suas dependências a partir de fontes. O Wget não está conseguindo baixar uma dependência, que está localizada em https://ftp.gnu.org/gnu/libunistring/libunistr...
14.10.2017 / 22:07
1
resposta

Como usar o wget ou outra ferramenta para baixar um arquivo, para o qual o link está oculto (ativa apenas no clique)

Eu quero baixar alguns arquivos de legenda, armazenados em arquivos rar do link O site fornece feeds RSS para seus novos lançamentos. Infelizmente, o link fornecido abrirá uma página de download, mas não obterá o arquivo. A página de downlo...
05.03.2012 / 10:10