Os documentos Nginx para a diretiva include
não documentam como os caminhos relativos são tratados (a partir da release 1.9.15). Minha leitura do código C é que o caminho deve ser absoluto ou relativo ao caminho do prefixo, como Alexey Ten ofereceu em um comentário.
Aqui está um link relacionado ao código-fonte .