Isso não será um problema se você tiver acesso às configurações dos Grupos de segurança para o painel do EC2 no console do Amazon Web Services.
Sempre que estiver logado, você pode acessar o grupo de segurança vinculado à sua instância do EC2, configurar o acesso Entrada e adicionar ou alterar as regras SSH. Há também um menu suspenso conveniente que diz "Meu IP", para que ele preencha automaticamente o espaço com suas informações e bloqueie essa instância.