Configure Server B como de costume (pppoe / dhcp para ISP B via Router/Modem B ) e configure o segundo NIC (que está enfrentando o Switch ) com um endereço IP estático, OU você pode configurar esse 2º nic com DHCP também, mas tenha cuidado para não configurar o Router/Modem A como gateway.
Com dhcpcd(8) você pode fazer isso com --nogateway ou com dhclient(8) , remova o routers dos parâmetros da cláusula request em dhclient.conf .