Você precisa de algo assim, é um switch ethernet, é basicamente um hub mais sofisticado. 10 / 100Mbit se você não tiver internet mais rápida. Não há necessidade de configurar, apenas plug and play. link
Mas fale com o seu provedor primeiro e quanto à possibilidade de usar este, eles talvez bloqueiem o acesso apenas para um computador de cada vez.