O Windows não suporta vários endereços de gateways para uma máquina individual, portanto, não acredito que você possa conectar dois roteadores WAN diferentes, independentemente de cabo ou Wi-Fi.
No entanto, pode haver outro caminho; O pfSense é um sistema operacional de appliance de firewall GRATUITO que você pode instalar em um PC pequeno. Aparentemente suporta múltiplos links WAN, então você pode instalar o PFSense em um pequeno computador com pelo menos três portas de rede, conectar seus dois roteadores às portas WAN do PC pfSense, conectar a terceira porta LAN do PFSense à sua LAN e deixar pfSense combinar as duas conexões.