Você precisa incluir todo o material ssl para o nginx no servidor {}
Você precisa de pelo menos
ssl on;
ssl_certificate /etc/ssl/domain.com.crt;
ssl_certificate_key /etc/ssl/domain.com.key;