É assim que eu fiz. (para outros com a mesma pergunta)
Start > Run > gpmc.msc
Clique com o botão direito
Default Domain Policy > Edit
Expandir:
Computer Configuration > Policies > Windows Settings > Security Settings > Account Policies > Password Policy
Você verá as políticas de senha.
Clique duas vezes em um deles e mude para sua necessidade!
Pode ser necessário executar gpupdate
para uma atualização rápida da política de grupo.