O roteador é o dispositivo que conecta duas redes diferentes. Então você deve teoricamente ter duas redes diferentes em ambos os lados do seu roteador.
Do que você escreveu em sua pergunta, sugiro que esse não seja seu provedor, mas sim seu roteador que atribui os IPs que você forneceu: 192.168.*.* é comum para topologias de redes locais, não para endereços WAN. As únicas coisas estranhas aqui parecem ser o seu DNS, que normalmente não é o mesmo servidor que o seu GateWay.
Por outro lado, você também pode estar na situação comum em muitos dormitórios onde o seu "provedor" é o seu proprietário ou o escritório de gerenciamento residencial e você obtém os IPs da rede local atribuídos ao seu pessoal. Como você mencionou o uso do roteador, este parece ser o endereço atribuído ao seu roteador, não ao seu PC particular. Nesse caso, você pode simplesmente conectar quantos clientes quiser ao seu roteador, ambos usando cabo ou sem fio, e todos usarão a linha compartilhada para conexão com a Internet.
Você não precisa configurar seus clientes de antemão, em vez disso, é melhor ativar o serviço DHCP em seu roteador para que este último distribua automaticamente o pool de endereços IP disponíveis para seus clientes e os gerencie (tendo um certo tempo de expiração etc.) .