Parece um trabalho para Amazon Storage Gateway . Embora eu nunca tenha usado isso sozinho, não posso dar mais detalhes além do que está nessa página.
Eu quero centralizar cerca de 1 TB de dados na AWS para 3 locais nas instalações (5 usuários em cada local). Nós vamos crescendo, mas ainda pequenos. Cada local tem uma conexão de 30 / 5mpbs. Cada um tem seu próprio servidor Linux. Eu acredito que sei o que fazer, mas tenho algumas perguntas.
1.) Vendo que os dados estarão na nuvem, quero otimizar o tráfego entre o local e a AWS. Existe uma versão do Linux do Branch Cache? Ou algo para armazenar localmente entre o local e a nuvem? O gateway de armazenamento é um APENAS SE não conseguimos encontrar outra solução.
2.) Eu sou melhor com s3, ebs, efs? (Há pacote que montará o balde s3).
3.) Se eu escolher ebs / efs (com uma instância), as taxas de transferência são mais lentas ou mais rápidas em comparação com s3? O s3 usa otimização?
Parece um trabalho para Amazon Storage Gateway . Embora eu nunca tenha usado isso sozinho, não posso dar mais detalhes além do que está nessa página.
Primeiro, decida sobre o tipo de armazenamento em nuvem. O Amazon AWS oferece várias ofertas de armazenamento diferentes. Mais detalhes podem ser encontrados aqui .
S3 (Simple Storage): um serviço de armazenamento estático destinado ao arquivamento, sites estáticos ou distribuição de mídia. O tamanho máximo de arquivo de um único objeto S3 é de 5 TB. Desempenho otimizado para grandes transferências de dados.
EBS (armazenamento de bloco elétrico): armazenamento persistente para bancos de dados, aplicativos, armazenamento. Limite de armazenamento de 16 TB. Acesse somente a partir de 1 instância do EC2 e contida em uma única zona de disponibilidade.
Amazon EFS (Elastic File System): funciona como um sistema de arquivos de rede gerenciado, mas na nuvem. Ele pode ser compartilhado entre as instâncias do AWS EC2. O tamanho máximo do arquivo é de 52 TiB. O desempenho é mais flexível do que outras opções.
Quanto à otimização de suas transferências de dados, há o Amazon Storage Gateway. Ou existem serviços como o Datapath.io. Além disso, a Amazon oferece o AWS Direct Connect para uma conexão dedicada entre seus servidores e a AWS. Para fornecer uma conexão mais consistente, você também pode comprar IOPS provisionado, a um custo.
A otimização do desempenho da AWS é uma combinação de escolha do tipo certo de armazenamento e instâncias para seus dados individuais, gerenciamento de suas transferências de dados e eficiente pipeline de rede.