Este é um dos cenários que o Nginx suporta explicitamente, e você provavelmente veria pelo menos alguns ganhos de desempenho devido ao pipeline aprimorado, tendo apenas uma única sessão TLS para negociar, etc ... assumindo que a arquitetura do seu aplicativo é tal que lucraria com esses benefícios.
No entanto, cuidado com o fato de que alguns dos hacks HTTP 1.1 mais usados que você pode ter implementado para otimizar seu desempenho no passado (por exemplo, sharding de domínio, sprites de imagem ...) são na verdade contraproducentes com HTTP2, então você pode querer para ajustar sua configuração de forma que eles sejam usados apenas para clientes HTTP1.1.Esses pontos são abordados com mais detalhes aqui: link