Como dito, normalmente a melhor e mais simples maneira é conectar todos os computadores diretamente ao modem / roteador.
Se realmente precisar, você pode clicar na conexão de rede sem fio no "Centro de Rede e Compartilhamento" no painel de controle do Windows. Ao clicar na conexão sem fio, uma janela será aberta mostrando o status da rede. Clique no botão "Propriedades" e selecione a guia "Compartilhamento" na janela aberta recentemente. Marque a caixa "Permitir que outros usuários da rede se conectem por meio de ..." e selecione a conexão com fio no menu suspenso. Depois de fechar as janelas de configuração de "OK", a conexão de rede deve ser compartilhada e funcionando com o outro PC (a menos que você tenha um firewall que bloqueie esse tráfego).
O outro PC precisará ser reconectado após essas alterações se não ativar a conexão automaticamente.