A latência é um assunto extremamente complicado e há um artigo sobre isso no wiki on-line
Simplificando, é o tempo que passa do momento em que um pacote é enviado até o momento em que você o recebe. Portanto, se você definir o armazenamento em cache para alta latência, armazenará mais dados antes de começar a reproduzir. Então, se você está com problemas de buffer, é necessário configurá-lo para alta latência.
Outro ponto interessante é que os pacotes não chegam na mesma ordem em que são enviados. Assim, pode acontecer que, se você estiver reproduzindo um arquivo de som na localização 5s, você pode obter pacotes da localização 5.1 antes desses 5s. O jogador precisará compensar por isso usando o cache, portanto, os pacotes do último período terão que esperar.