Perguntas sobre 'googlebot'

Tags
2
respostas

AH01797: cliente negado pela configuração do servidor: / usr / share / doc

Desde muito tempo (mais de um mês agora) vejo linhas como as seguintes nos logs do apache: 180.76.15.138 - - [24/Jun/2015:16:13:34 -0400] "GET /manual/de/mod/module-dict.html HTTP/1.1" 403 396 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +h...
25.06.2015 / 07:07
1
resposta

Por que o googlebot está solicitando o robots.txt do meu servidor SSH?

Eu corro ossec no meu servidor e periodicamente recebo um aviso como este: Received From: myserver->/var/log/auth.log Rule: 5701 fired (level 8) -> "Possible attack on the ssh server (or version gathering)." Portion of the log(s): Nov...
19.11.2013 / 20:40
1
resposta

O que há com as consultas de caracteres aleatórios provenientes do googlebot, por exemplo, vvytnoxvontwusz.html?

Um dos meus sites recebeu consultas do googlebot, da ordem de: example-log:66.249.79.216 - - [06/Apr/2016:15:36:56 -0700] "GET /vvytnoxvontwusz.html HTTP/1.1" 404 15136 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.h...
07.04.2016 / 02:43
1
resposta

fail2ban ignoreip Exemplo de host DNS?

Gostaria de adicionar ".googlebot.com" ao ignorar o iplist para o fail2ban, pois a explicação ignoreip menciona o host DNS como uma entrada aceita. Este é um formato adequado? # "ignoreip" can be an IP address, a CIDR mask or a DNS host. Fail...
13.12.2013 / 05:34
1
resposta

Nginx Regras de regravação do Googlebot com falha 404

Nosso site é baseado no Angular, o que o torna quase totalmente baseado em JavaScript, portanto, precisamos veicular instantâneos HTML estáticos no Googlebot para que ele nos rastreie. No momento, temos essa implementação em vigor: location /...
26.07.2013 / 16:45
1
resposta

Google-Bot se apaixonou pela minha página 404

Todo dia meu log de acesso parece com isso: 66.249.78.140 - - [21/Oct/2013:14:37:00 +0200] "GET /robots.txt HTTP/1.1" 200 112 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" 66.249.78.140 - - [21/Oct/2013:14:37:...
21.10.2013 / 22:28
1
resposta

Apache: com as conexões do Googlebot, um único processo ocupa toda a memória do servidor

Seguindo link I postar como uma nova pergunta porque consegui identificar o fato de que isso acontece quando o cliente se conectando é o Googlebot. Por "isso", quero dizer que um único processo apache consome 5 Gigabytes de memória?! Alg...
18.08.2012 / 01:35
1
resposta

O Googlebot não consegue acessar o meu site. Ferramentas do Google para webmasters answer URL inacessível

Quando tento buscar meu site como um googlebot nas ferramentas do Google para webmasters, ele retorna Unreachable robots.txt, depois de investigar, eu entendi que o google bot pode ver meu servidor: tcpdump | grep google Ele retorna que o...
27.10.2013 / 07:15
1
resposta

O Googlebot procura repetidamente por arquivos que não estão no meu servidor

Estou hospedando um site para uma organização de voluntários. Mudei o site para o WordPress, mas nem sempre foi assim. Eu suspeito que em um ponto ele foi hackeado mal. Meu arquivo de log de erros do Apache cresceu para 122 kB nas últimas 18...
13.11.2012 / 03:51
1
resposta

Permitir que o Google ignore o Nginx do firewall

Então, estou procurando um sistema que retorne essencialmente um 401 para cada visitante que não tenha um determinado cookie. Eu gostaria de fazer isso, se o visitante / solicitante for o google, então ele não retornará o 401. Então aqui está...
24.02.2016 / 01:15