Você faz isso no roteador, não nos PCs. Não permita que os PCs em questão saiam da rede; só permite que o proxy saia da rede. Use ACLs ou NAT ou o que for que funcione para o seu roteador.
Você precisa configurar os PCs para usar o proxy, e um GPO ou WPAD é um bom método para isso.