Na tela de administração do roteador, você pode ver os dispositivos atualmente conectados (e normalmente seu endereço MAC também e o IP atribuído). Você pode verificar isso para ver se há mais dispositivos do que você configurou.
Se você estiver usando a rede sem fio, é mais provável que o problema de velocidade seja uma interferência de sinal do que alguém que tenha leeching sua conexão, especialmente se você tiver a configuração de segurança.
Se você me disser que modelo linksys eu posso vincular as instruções para a tela de administração nesse modelo.