Você terá que configurar seu roteador para permitir o tráfego de saída apenas para o (s) endereço (s) IP que oferece suporte à VPN à qual você está se conectando.
O Windows não poderá acessar a Internet quando a conexão VPN estiver inativa e retomará a operação normal da rede quando a VPN ficar on-line.