estou tentando acessar uma página específica usando este comando no bash scripting:
wget --no-cookies --header="Accept: text/html" --user-agent="Mozilla/5.0 (Macintosh; Intel Mac OS X 10.8; rv:21.0) Gecko/20100101 Firefox/21.0" -O $2/content.html $1
E o resultado é que eu recebo a página do bot do site porque o wget está reutilizando a conexão existente (eu acho). Esse comando estava funcionando antes de eu testar o spam e agora meu servidor está recebendo um redirecionamento de teste de bot do site (não posso usar isso).
--2017-12-12 19:16:42-- https://www.kayak.co.uk/h/bots/human-redirect.vtl?url=%2Fflights%2FDUB-LAX%2F2018-06-04%2F2018-06-25%2F2adults%3Fsort%3Dbestflight_a
Reusing existing connection to [www.kayak.co.uk]:443.
HTTP request sent, awaiting response... 200 OK
A minha pergunta é: existe alguma maneira de impedir que o wget use a conexão existente e reconecte o site para fazer o download de cada vez?
Tags networking wget