O RJ11 não pode ser Cat5e - o Cat5e requer todos os 8 pinos de um RJ45. Muito provavelmente, o que eles estão fornecendo é uma linha vDSL de seu equipamento para o modem, mas os detalhes podem variar muito.
O método 'least loss' é deixar o modem próximo ao soquete de parede (a maioria dos modems pode ser montado na parede) e executar o Cat5 entre o modem e o roteador. Mas o método simples que você sugeriu pode não causar perda suficiente para ser um problema.