A resposta para a sua pergunta é não, não há nenhuma maneira dentro do ssh de impor frases de alteração regulares.
Como você está usando uma única conta, presumivelmente todas as chaves públicas estarão em um único arquivo authorised_keys, para que você possa invalidar as chaves removendo-as. Isso parece um esforço demais e as pessoas podem usar a mesma frase secreta em uma chave diferente.
Uma maneira de facilitar o seu problema é usar a autenticação multifator, dessa forma, mesmo que a chave / senha seja comprometida, há outra camada no caminho.