Sua capacidade de fazer isso pode depender do software de VPN específico que você está usando e de quanto controle você tem sobre sua configuração. O que você está procurando é o "túnel inverso dividido" no mundo VPN. Observe que isso será controlado por IP / rede, não com base no nome DNS do site.
Uma abordagem que você poderia tentar seria adicionar os IPs de destino dos sites específicos à sua tabela de roteamento do sistema com o endereço de gateway (próximo salto) definido para o endereço IP do seu roteador de Internet upstream. Se isso funciona dependerá de como o cliente VPN que você está usando conecta-se à pilha de rede do sistema para redirecionar o tráfego pela VPN.