Você não encontrará suporte para isso nativamente com o conjunto de recursos ELB e Elastic Beanstalk.
Eu sugeriria o encaminhamento baseado em caminho usando o HAProxy para enviar tráfego para seus aplicativos do Elastic Beanstalk. Você desejará executá-lo em um par de instâncias do EC2 localizadas atrás de um ELB clássico simples, executando uma verificação de integridade em relação ao próprio HAProxy, por uma questão de alta disponibilidade.
Aqui está um exemplo geral com o HAProxy:
# match incoming request based on path in url
acl service1 path_beg /service1
acl service2 path_beg /service2
# send matched request to a specific backend
use_backend service1 if service1
use_backend service2 if service2
# define the target backends (Elastic Beanstalk LB DNS, likely)
backend service1 :80
option httpchk /haproxy_health_check
server service-1 service1.aws.mybeanstalklb.com:80
backend service2 :80
option httpchk /haproxy_health_check
server service-2 service2.aws.mybeanstalklb.com:80
Se você não estiver interessado em executar isso sozinho no EC2, explore essa configuração em uma imagem da janela de encaixe HAProxy e execute o contêiner em Serviço de Contêiner EC2 .