Acabei precisando executar o comando assim:
mosh --ssh="ssh -i ~/.ssh/kp1.pem" [email protected]
Isso funciona, mas também precisei adicionar uma regra para a porta 60001 para mosh ser executada no console de gerenciamento do EC2 em grupos de segurança.