Esse artigo explica uma maneira de fazer isso: link
A ideia é buscar manualmente a resposta do OCSP e usar a diretiva ssl_stapling_file.
link explica em detalhes:
URL=$(openssl x509 -in $SERVER_CER -text | grep “OCSP – URI:” | cut -d: -f2,3)
openssl ocsp -noverify -no_nonce -respout ocsp.resp -issuer \ $ISSUER_CER -cert $SERVER_CER -url $URL
Where “ocsp.resp” is whatever file you have configured in Nginx for the “ssl_stapling_file“.