Você pode ter uma velocidade de download rápida, mas é preciso lembrar que esse não é o único fator a ser contado. Você também tem que contar que o servidor do qual você está fazendo o download tem que servir várias pessoas e que sua velocidade de upload é o que você pode dar, como usuário único, o que você recebe.
Além disso, o speedtest emprega vários servidores em locais diferentes e fará o teste mais próximo a você com a menor quantidade de roteadores e portões ao longo do caminho. O servidor do qual você pode fazer o download pode estar na metade do planeta e isso causará uma perda nos dados que precisarão ser retransmitidos.