Embora pareça ser bastante simples, não consegui configurar o apache para que as solicitações do googlebot não sejam armazenadas no log de acesso. Eu tentei as seguintes linhas:
SetEnvIfNoCase User-Agent googlebot dontlog
BrowserMatchNoCase googlebot dontlog
CustomLog "/foo/bar/access_log" combined env=!dontlog
e eu reiniciei o apache depois de adicioná-los, mas o log ainda está gravando todas as solicitações do google bot. Meu entendimento é que o SetEnvIf User-Agent e o BrowserMatch fazem a mesma coisa. Eu tentei cada um deles, mas não funciona.
Tags logging apache-2.4 googlebot