A única maneira que conheço é incluir um filtro com sua entrada nss_base_group . Dependendo da estrutura de grupo que você está usando, talvez seja necessário substituir cn por gid ou outra coisa. Talvez seja necessário alterar a base e o escopo da pesquisa, dependendo do sistema.
nss_base_group ou=groups,dc=example,dc=com?one?(!(cn=admin))