Na unidade da porta? : S
De qualquer forma ... Se o roteador tiver mais de uma porta, você precisará apenas de um cabo Ethernet padrão. Um roteador normalmente tem DHCP (junto com muitos outros itens) e funcionará bem por conta própria.
Se tiver apenas uma porta ethernet, não há uma maneira de saber 100%, mas se ela for chamada de roteador, provavelmente será capaz de usar um cabo padrão.
(eu acredito, mas não tenho 100% de certeza) Uma maneira rápida de verificar é olhar suas configurações de IP, se você tiver um padrão (10.x.x.x, 192.168.x.x, 172.16.x.x), ele usa ethernet. Se você tiver 169.x.x.x (configurado automaticamente), há uma chance de que ele possa ser cruzado, pois não há infraestrutura. Se você tiver configurações manuais, não há realmente nenhuma maneira de saber.