O Squid pode funcionar como um proxy reverso da web que faz o que você quer - veja Proxy reverso com vários servidores da Web de backend
Você pode configurar o roteador para encaminhar a porta 80 para o servidor do squid e deixar o squid encaminhar a solicitação para diferentes servidores da Web internos.