Teoricamente, deve - você provavelmente terá que mudar os detalhes do PPPoE da página de conexão do roteador.
Praticamente, alguns operadores podem ligar os roteadores à linha telefônica / número. Eu nunca vi isso, só ouvi relatos disso, mas não deve haver razão para você não poder usá-los