Acabei precisando executar o comando assim:
mosh --ssh="ssh -i ~/.ssh/kp1.pem" [email protected]
Isso funciona, mas também precisei adicionar uma regra para a porta 60001
para mosh
ser executada no console de gerenciamento do EC2 em grupos de segurança.