O armazenamento de objetos do DigitalOcean, o Spaces, é lento na recuperação de arquivos pequenos

7

Mudamos de uma solução de armazenamento em blocos personalizada para o armazenamento de objetos da DigitalOcean e estou meio que desapontado com a velocidade.

Existe alguma maneira que possamos recuperar objetos de forma assíncrona? Além disso, alguns objetos com cerca de 50 KB podem levar de 57 ms a 3 segundos ... Isso é normal para soluções de armazenamento de objetos ou isso é apenas um problema com o DigitalOcean?

AtualizaçãodoDigitalOcean:

Depoisdelutarcomapoionasemanapassada,finalmenteconseguiumarespostaaceitável:

"Our Spaces team are aware of some possible performance bottlenecks and are working on addressing those." - Mike G., Platform Support Advocate

Eu notei, um dia depois de enviar uma solicitação de suporte (2017-12-18), a velocidade média foi de 0,74 segundo (com um tamanho médio de arquivo de 78,6 KB) antes do O armazenamento do NYC3 caiu . Agora está em 0,42 segundo com uma média. tamanho do arquivo de 88.48 KB, testado em 2017-12-20.

    
por Jared Dunham 19.12.2017 / 16:22

2 respostas

5

1) O armazenamento de objetos não foi projetado para lidar com a carga de trabalho destinada a usá-lo. Para encurtar a história: O K / V baseado em hash procura nunca atingir o desempenho de um dispositivo de bloco "imediato" em busca de endereçamento LBA.

link

2) O Oceano Digital é apenas @ # $ ^ E% ^ # sistema de armazenamento! Solte-o como está quente e substitua-o por hardware COTS combinado com o Ceph.

link

    
por 23.12.2017 / 15:35
0

aleatoriamente lento, boa sorte para solucionar problemas de desempenho de armazenamento de objetos - O oceano digital pode estar limitando você, o ponto de extremidade público de armazenamento de objetos é ... público. Ele também pode depender do seu servidor proxy de saída ou ISP, de qualquer forma eu não esperaria que fosse algo como desempenho como solução de armazenamento de bloco personalizado. O armazenamento de objetos é um sistema chave / valor 'suficientemente rápido'

    
por 19.12.2017 / 18:06