Você pode colocar o CloudFront na frente do seu bucket s3 e fazer com que o CloudFront encerre a conexão SSL. HTTPS é gratuito ao usar o SNI.
Etapas:
- crie a distribuição e configure o ssl, com a origem sendo seu repositório de redirecionamento do site s3.
- defina o
cname
como seu domínio nu - atualize a rota 53 para apontar para esta distribuição