Absolutamente! Isso é o que esses plugues estão lá para.
Em vez de um roteador sem fio, você provavelmente quer algo como um Access Point, consulte essa pergunta aqui .
Basicamente, você precisará de algo para ampliar sua rede. Outro roteador fará isso, mas criará uma segunda sub-rede e, em seguida, você encontrará problemas funky de NAT duplo.
Uma solução melhor é ir para um Ponto de acesso sem fio . Ele permitirá que dispositivos sem fio conectem sua rede atual sem se deparar com os problemas que um segundo roteador introduziria.