Perguntas sobre 'screen-scraping'

Tags
1
resposta

Erro de macroscopia na Web

Estou tentando descartar várias páginas que são um resultado de pesquisa de um trabalho importante. Eu escrevi esse código, mas estou recebendo um erro quando o executo. Erro: Application \-defined or object-defined error. Quando clico e...
13.04.2015 / 07:05
1
resposta

Web raspando / rastreando um site específico

Estou tentando copiar 1265 arquivos html de uma só vez para obter o nome e as descrições dos itens que tenho em um site. Eu tenho permissão do atacadista para copiar os dados, mas eu não quero passar dias apenas para obter descrições, então exi...
25.07.2014 / 22:55
0
respostas

Navegando / clicando em menus suspensos em um website

Estou tentando fazer com que meu Excel VBA navegue até uma determinada página de um site financeiro, mas não posso clicar corretamente ou selecionar uma opção suspensa em um "menu suspenso" para chegar a essa página. Eu tentei emular perguntas s...
08.06.2018 / 22:49
0
respostas

O uso mínimo de memória no Firefox headless?

Eu planejo executar um bot em muitas instâncias paralelas separadas e gostaria de manter o uso de memória no mínimo. O bot só precisa de JS funcional e carregamento de página, mas nada é gráfico. Ele só usará uma única guia em um determinado mom...
12.03.2018 / 02:07
0
respostas

Como copiar e-mails de 'websites usando cloudflare'? que dá [email protected]

Eu estou tentando raspar o site e todo o seu conteúdo. O site que estou tentando usar o cloudflare, então se houver endereços de e-mail no site, ele fica ofuscado e mostra [email protected] se eu tentar usar php simple_html_dom se eu a...
02.11.2017 / 14:54
0
respostas

Página da Web para paginado, texto PDF

Estou procurando uma maneira simples de converter um site em um PDF paginado com texto selecionável. Eu tentei muitas extensões de navegador, mas elas só permitem PNG, capturas de tela de página inteira e impressão com diálogo de sistema queb...
07.09.2017 / 18:34
0
respostas

Como saber se vários sites contêm uma palavra-chave

Eu tenho uma lista de 9k endereços da web e algumas palavras-chave. Gostaria de saber se uma página da Web contém essa palavra. Idealmente, a pesquisa automatizada do google com alguns operadores de pesquisa funcionaria muito bem, por exemplo...
02.06.2016 / 15:45
0
respostas

Captura de tela via porta de exibição / splitter / hardware do monitor

Histórico de problemas Eu tenho um programa de captura de tela que identifica imagens na minha tela e informa informações úteis para mim. Eu quero ser extremamente cauteloso em torno do aplicativo que eu estou raspando tela porque eles ativam...
24.09.2014 / 23:31
1
resposta

Percorrer automaticamente as páginas baixar links filtrados em um site

Com o DownThemAll! Eu posso baixar todos os links em uma determinada página e posso filtrá-los. digamos que o site seja www.google.com.br e quero pegar todos os resultados da pesquisa. Eu configurei um filtro: / search? Q = Isso irá captur...
16.09.2014 / 00:38
0
respostas

Recomendação sobre raspagem da Web e fluxo de dados

Eu tenho uma unidade de painel solar, e a empresa que a configurou ( Fronius ) tem um site onde eu posso transmitir ao vivo dados coletados a partir do painel solar (energia atual, energia hoje, dados mensais e anuais). Gostaria de exibir os...
19.09.2014 / 21:34