Perguntas sobre 'googlebot'

0
respostas

Habilitando TLS / SSL com SNI em um subconjunto de sites, sem perder a classificação de SEO nos sites não-TLS

Executamos vários servidores LAMP na AWS com algumas dezenas de sites neles, que os clientes nos pagam para projetar, construir e hospedar. Eles são servidores do Ubuntu 14.04 com Varnish, Apache e PHP. Atualmente, se um cliente quiser ter SS...
01.03.2017 / 14:42
1
resposta

Como evitar que o bot do Google favicon ligue para o meu site?

Eu tenho um URL de back-end que uso somente no google chrome. Não é público aberto. No entanto, por algum motivo, este bot "Google Favicon" ip localizado no Google chama esse URL que eu não quero. Meu palpite é que o Google obtém esse URL do meu...
20.04.2016 / 05:54
2
respostas

bloquear fake google bots [duplicado]

Como eu posso bloquear ataques DDOS com bots do Google falsos? Encontrei 2 soluções na rede. Mas ambos parecem bloquear também corrigir bots do Google. # Block fake google when it's not coming from their IP range's (A fake googlebot) [F]...
02.11.2015 / 20:22
2
respostas

Googlebot solicitando páginas de 1 site em outro site

Problema : Usando o Prerender.io para indexar / armazenar páginas de um site, recebo solicitações de caminho que só existe no meu site antigo Exemplo : no Pré-renderizo, vejo que o Googlebot solicitou http://www.new-site.com/old/site/pat...
15.05.2015 / 13:17
0
respostas

Problemas ao filtrar o googlebot a partir do log de acesso do apache

Embora pareça ser bastante simples, não consegui configurar o apache para que as solicitações do googlebot não sejam armazenadas no log de acesso. Eu tentei as seguintes linhas: SetEnvIfNoCase User-Agent googlebot dontlog BrowserMatchNoCase g...
07.04.2015 / 14:42
1
resposta

O Google-bot tropeça em um robots.txt perfeitamente normal e, em seguida, em um robots.txt inexistente [duplicado]

Eu tenho dois nomes de domínio apontando para o mesmo servidor virtual. Um deles, o link , é um site de brochura de trabalho que fiz para um amigo. Eu usei o outro, link , para testar o site antes de torná-lo público - em retrospecto, provav...
15.05.2014 / 10:24
0
respostas

nginx serve arquivo html diferente para o googlebot

Eu tenho um aplicativo angular veiculado pelo nginx. Para o googlebot eu quero servir um arquivo html estático diferente para que ele possa indexar corretamente, a configuração nginx a seguir está correta? (Eu não quero complicar a configuração...
15.10.2013 / 16:17