Você precisará de algum tipo de navegador off-line para percorrer automaticamente todos os links do site. Eu não usei o Teleport Pro, mas HTTrack é um navegador offline gratuito que é bastante poderoso. Eles fornecem um exemplo de como você pode percorrer um site em busca de uma determinada palavra-chave.