Você simplesmente precisa de um novo bloco de servidor com o server_name definido para o segundo domínio e um proxy_pass no local. Se você precisar que ele seja https, você poderá listar outro certificado ou o mesmo certificado se ele tiver os nomes alternativos corretos. Isso é abordado no guia para iniciantes do Nginx.
server {
server_name example.com;
listen 80;
listen 443 ssl http2;
ssl_certificate /var/lib/acme/certs/xyz/fullchain;
ssl_certificate_key /var/lib/acme/certs/xyz/privkey;
# Set up preferred protocols and ciphers. TLS1.2 is required for HTTP/2
ssl_protocols TLSv1 TLSv1.1 TLSv1.2;
ssl_prefer_server_ciphers on;
ssl_ciphers ECDH+AESGCM:ECDH+AES256:ECDH+AES128:DH+3DES:!ADH:!AECDH:!MD5;
# This is a cache for SSL connections
ssl_session_cache shared:SSL:5m;
ssl_session_timeout 60m;
location / {
proxy_pass http://example.com;
}
}