Não, isso não é possível através do balanceador de carga da AWS, você pode fazê-lo no nível do servidor permanentemente redirecionando o tráfego http para https (nos arquivos de configuração do servidor) ou pode fazê-lo em o nível do DNS, dependendo de onde seus servidores de nomes estão hospedados.
O Route53 não habilita o redirecionamento de URLs, o Cloudflare faz o mesmo que outros.