Isso não é algo que o LDAP pode e deve fazer. Para fazer isso automaticamente, o sistema precisaria verificar constantemente o diretório LDAP para verificar se o usuário ainda é válido e isso não é uma boa abordagem.
Basta escrever um script curto que desative / apague os usuários e elimine todos os processos (bash?) nos sistemas relevantes.