Encontrei. Para qualquer um que chegar aqui procurando essas informações, abaixo está o que eu finalmente faço.
Eu iniciei uma aplicação no Elastic Beanstalk. Ele pode ser configurado com o Git e o código pode ser enviado para ele do meu computador.
Eu crio 2 ambientes e alterno regularmente entre eles para uma transição perfeita.
Felicidades!