wget falha, mas a abertura no navegador é bem-sucedida. Como?

Question

Eu estava tentando baixar um pdf do site da Intel em este endereço . Quando eu abri-lo através do navegador ( google-chrome ) parece não haver problema em visualizá-lo ou armazená-lo no meu disco rígido.
Mas quando tentei usar wget http://www.intel.com/content/dam/www/public/us/en/documents/manuals/64-ia-32-architectures-software-developer-manual-325462.pdf ,
recebi o seguinte erro:

Connecting to www.intel.com|128.230.11.57|:80... connected.
HTTP request sent, awaiting response... 403 Forbidden
2012-03-12 16:12:25 ERROR 403: Forbidden.

FYI, Não houve login necessário no site. Por que isso aconteceria?     

Answer 1

Nesse caso, o site está verificando o User-Agent. wget --user-agent=Safari ... baixa o arquivo sem problemas. (Todo mundo teme bloquear os clientes da Apple, aparentemente.)