Então, depois de elevar o nível do meu google-fu, descobri o pamtester
.
Ele faz tudo que eu preciso, e está disponível nos repositórios do Ubuntu (e eu acho que também está disponível em outras distribuições). O pacote ubuntu é chamado simplesmente de pamtester