Acabou que eu tinha um redirecionamento permanente de 300 no aplicativo anterior. Como resultado, a hospedagem do S3 não estava funcionando, pois é apenas HTTP e não HTTPS. Eu criei uma distribuição em cloudfront e adicionei suporte a HTTPS. Funciona agora.