Parece que o que você está tentando alcançar é o bridge sem fio, no qual você está conectando duas redes via wireless, em vez de via cabo físico. De um modo geral, colocar dois roteadores no mesmo SSID não os faz funcionar na mesma rede inerentemente. Seus roteadores devem suportar explicitamente a ponte sem fio para tirar proveito disso, caso contrário, é melhor conectar fisicamente os dois roteadores.
Sem conhecer o modelo específico, não posso dizer com certeza se seus roteadores sem fio suportam essa funcionalidade.
Dito isto, você deve optar pela opção com fio.
Atualização (configurações de ponte sem fio):
Para o ZyXel, vá para a página 56 / Capítulo 4.5 do Manual do usuário do NBG-416N
Para o TP Link, vá para a página 28 / Capítulo 4.6 do Manual do usuário TL WR543G