Sim, você pode. Você deve, no entanto, fazer com que as outras pessoas gerem seus próprios pares de chaves e, em seguida, peça-lhes sua chave pública.
Você pode adicionar a chave pública ao arquivo ~/.ssh/authorized_keys da conta relevante.
O principal motivo para fazer isso dessa maneira é que você não precisa descobrir como transferir com segurança a chave privada gerada (e a frase secreta) para a pessoa que deseja usá-la. Não há problema com a transferência de chaves públicas, afinal elas são públicas.