Se eu entendi bem a pergunta, você tem um arquivo contendo vários nomes de usuário e senhas e deseja limitar a autenticação a um usuário específico desse arquivo para cada bloco de servidor e manter a configuração centralizada?
Infelizmente, você não pode fazer isso com o nginx, você precisará dividir o arquivo em vários contendo apenas um par de usuário: senha.