Descobri isso. Às vezes, quando o Chrome está carregando uma página e, às vezes, TODOS os botões não respondem por apenas um segundo, é durante esse período que o botão de voltar não funciona.
A única solução que consigo pensar é adquirir o hábito de esperar que TODO o conteúdo da página seja carregado antes de você clicar no botão voltar.