Downloads paralelos no Google Cloud Storage

1

Alguém tem experiência com o Google Cloud Storage? É feito para um potencial 10K de pedidos paralelos para baixar arquivos 10-70mb? Ou isso exigiria um CDN?

    
por Dave A. 10.07.2018 / 19:20

2 respostas

2

link

There is no limit to reads of an object. Buckets initially support roughly 5000 reads per second and then scale as needed.

Você pode ter problemas se você frequentemente passar de zero a 10k pedidos paralelos (assumindo que eles são realmente paralelos, e não, digamos, "no mesmo par de minutos") rapidamente:

As a bucket approaches its IO capacity limit, Cloud Storage typically takes on the order of minutes to detect and accordingly redistribute the load across more servers. Consequently, if the request rate on your bucket increases faster than Cloud Storage can perform this redistribution, you may run into temporary limits, specifically higher latency and error rates. Ramping up the request rate gradually for your buckets, as described below, avoids such latency and errors.

    
por 10.07.2018 / 20:47
3

Sim, o GCS pode processar solicitações paralelas de 10k para fazer o download de arquivos.

    
por 10.07.2018 / 19:46