Você precisa de um dispositivo que possa conversar com as duas mídias - Wi-Fi e Ethernet ao mesmo tempo.
Se o seu telefone celular puder servir como roteador - do que você precisa apenas do ponto de acesso WiFi configurado na Camada 2 e, por outro lado, conectado ao Switch da Camada 2, onde todos os outros dispositivos Ethernet serão conectados.
Se o seu celular não pode ser um roteador, o ponto de acesso WiFi deve ser configurado na Camada 3 com NAT. Caso contrário, é o mesmo conceito.
Mas se você está dizendo que já está usando o celular para essa finalidade - provavelmente ele pode ser um roteador, então você só precisa do ponto de acesso FiWi configurado como cliente para o seu celular WiFi. O cabo Ethernet do ponto de acesso vai para um switch onde todos os outros dispositivos Ethernet também vão.
Eu não posso recomendar um ponto de acesso específico - há muitos deles e a maioria deles fará o trabalho por você.