Se a largura de banda não é um problema, e os tempos de carregamento são aceitáveis sem o gzip, você deve definitivamente deixar o gzip desligado.
Gzipping requer muitos recursos da CPU. Então, se você está mais preocupado com a CPU do que com a largura de banda, se o site carrega rápido o suficiente, e se o ESI é uma grande ajuda para você, então definitivamente o sistema de cache de proxy reverso tem mais benefícios do que gzipar respostas http.
Em outras situações, onde a largura de banda é crítica, o gzip pode ser mais importante, mas não parece ser o caso aqui.
Finalmente, o gzip pode ser feito por alguns proxies reversos. Esta é uma ótima possibilidade, porque os proxies reversos geralmente não usam muita CPU (se estiverem em um servidor separado). Isso economiza muitos ciclos de CPU e também economiza largura de banda, mas no momento, e se bem me lembro, o Varnish não suporta gzipping.