Eu tenho um URL como myurl.com/contents e estou tentando buscar todo o conteúdo da pasta.
Alguns arquivos, como myurl.com/contents/unlisted-file.1 , não estão vinculados a nenhum lugar. Esses arquivos são acessíveis; se eu wget deles
explicitamente ou digite o endereço no navegador, eu posso vê-los.
Agora, estou fazendo wget myurl.com/contents -r -np para buscar todo o conteúdo da pasta, mas não está baixando os arquivos não listados.
Se meu entendimento estiver correto, isso ocorre por design - wget baixa apenas arquivos vinculados a.
Existe alguma maneira de baixar arquivos all - vinculados e desvinculados - em uma pasta do servidor, seja através de wget ou alguma outra ferramenta?