Não, acredito que isso seja esperado.
option http-server-close
Fechará a conexão do HAProxy para o backend, mas manterá a conexão ativa entre o cliente e o haproxy-server.
O HAProxy fechará a conexão se / quando o tempo limite for atingido, então você pode querer ajustar as opções timeout http-keep-alive
e timeout client
.