Isso é errado. Você tem duas conexões de Internet diferentes, mas não uma conexão com duas linhas troncalizadas. Eu acho que seu operador sabe nada sobre o tronco em suas linhas. O pacote que sai da primeira linha tem algum IP de origem, mas quando sai da segunda linha tem outro IP de origem. Sua configuração, como você vê, não tem chance de funcionar.
Eu não conheço o seu roteador, mas configure isso como duas linhas diferentes. Ou consulte a configuração com seu provedor de internet.
Quando a ligação é impossível, a ideia é que o roteador decida quais redes externas são atendidas pela primeira linha e por segundo.
Talvez isso ajude você a: link