precisa de conselhos para armazenar o hardware de configuração de dados para o cliente com 80 TB por ano de aumento da pegada de dados

3

Atualmente, tenho um cliente que adicionará dados replicados de locais de satélite no número de aproximadamente 80 TB por ano. com isto dito no ano 2 teremos 160TB e assim sucessivamente ano após ano. Eu quero fazer algum tipo de RAID 10 ou RAID 6 de configuração. Eu quero manter os servidores para aproximadamente 4u de altura e montado em rack. Todas as sugestões são bem-vindas em uma estratégia de replicação. estaremos querendo ter uma instância dos dados internos e a outra a ser co-localizada (alguma sugestão sobre sites de co-localização também?).

o hardware óbvio será algo como um servidor de montagem em rack com bandejas de troca a quente e processadores do tipo dual xeon. o uso dos dados é para arquivos de informações, os arquivos serão compostos de pequenos tamanhos de arquivo.

Eu posso adicionar ou expandir para essa pergunta se ela for muito vaga. obrigado por procurar.

    
por dasko 03.04.2010 / 01:48

8 respostas

3

Sun Fire X4540 - 96 TB em 4u.

Compre uma caixa * por ano, não compre antes de precisar. (O sistema de armazenamento completo deve ter algum nível de redundância, normalmente uma caixa para o trabalho em andamento e uma caixa para cada conjunto de arquivos.)

ZFS com desduplicação no RAIDZ3. A desduplicação pode reduzir suas necessidades de armazenamento de dados por um grande fator, dependendo dos padrões de dados. Adicione a compactação se o tipo de dados e o uso permitirem.

    
por 04.04.2010 / 04:06
2

As matrizes de armazenamento HP da Lefthand farão tudo o que você deseja. RAID 10, ou 6, ou 60 (provavelmente a melhor escolha, dada a densidade de dados que você precisará). Eles fazem replicação externa, deduplicação de dados e você pode ter sua opção de conexões iSCSI ou FC. O único inconveniente é o preço, esteja preparado para pagar por todo esse armazenamento e recursos.

Se você está disposto a rolar sua própria solução; Se você considerar um gabinete Chanbro, o 4U pode armazenar 48 unidades SFF (com unidades de 500 GB, mais de 20 TB por 4U) e placas de expansão SAS que permitem que um chassi vazio (cheio de unidades) seja usado como um gabinete externo. / p>

Para a maioria das situações, recomendo ir com uma solução "profissional", pois ela será apoiada e terá mais chances de continuar sendo apoiada daqui a 4 ou mais anos.

    
por 03.04.2010 / 05:11
1

Estamos usando prateleiras CORAID para algumas de nossas coisas. A última prateleira que estamos criando é uma porta 24 cheia com drives de 2 TB link . Nós temos 4 prateleiras até agora. Ele ocupa 4u, é certificado com vmware e possui linux & drivers do Windows disponíveis (eu uso os dois atualmente).

O custo / gb é muito baixo. Eu implantei a primeira prateleira em 2006 e nunca tive nenhum problema com o equipamento CORAID.

    
por 04.04.2010 / 08:47
0

Considerando o crescimento dos dados, é uma boa ideia pensar em um dispositivo de armazenamento que possa crescer de acordo com suas necessidades. (como um XIV / DS ???? / StorageTek / StorageWorks etc.).
Também é possível aplicar a desduplicação antes ou depois da replicação (no caso de fazer sentido, é claro)

Você poderia considerar uma implementação do HSM com a camada final de armazenamento sendo fitas não necessariamente discos. Eu não sei se servidores 4u são a abordagem correta neste caso, qual será a capacidade por servidor e quantos servidores 4u você acha que precisará em digamos 6 anos (para quase metade dos petabytes de dados)? br>

    
por 03.04.2010 / 02:12
0

Você está disposto a construir o seu próprio? Ou você está olhando para uma solução de fornecedor? Você precisa acessar os dados como um único volume, ou o seu sistema resolverá descobrir em qual servidor seus dados estão? Você está preocupado em ter pelo menos duas cópias de seus dados em sistemas diferentes ou está lidando com backups adicionais? Isso precisa funcionar como uma SAN ou é arquivado e capaz de lidar com tempos de acesso um pouco mais lentos?

Se você estiver olhando para uma solução fornecida pelo fornecedor, seus vendedores receberão muito bem para identificar o que você precisa e fornecer uma cotação. Se você quer construir o seu próprio, considere o ZFS.

A solução 4U mais densa que usei link

Se você criasse um produto semelhante ao de soluções da Lefthand ou com o glusterFS, poderia criar um cluster com redundância em cima de vários desses nós.

    
por 03.04.2010 / 02:55
0

Eu consideraria seriamente o uso dos gabinetes de disco MDS 600 da HP - você pode obter 140 TB em 5U, eles são muito rápidos, confiáveis, podem servir vários servidores ou ter várias caixas conectadas a um único servidor e podem ser facilmente RAID 10 ' d.

CLIQUE para link.

    
por 03.04.2010 / 10:00
0

Este é um assunto grande e complicado, mas como não estou aqui por pontos, vou tentar.

Você pode ter que determinar as atualizações. Vamos dizer que você quer configurá-lo e executá-lo neste hardware por 5 anos, seu cliente vai pagar muito por esse espaço não utilizado. Eu digo espaço não utilizado porque a sobrecarga para os próximos 5 anos não vai ser usada e não vai ser barato, digamos que você escolheria uma SAN. Embora esta solução seja tentadora (ou seja: comprar uma SAN grande com 1/5 dos discos usados). MAS, em 3 anos, você pode comprar o mesmo hardware, mas há menos chances de você comprar o novo e (mais do tempo maior, digamos 6 TB discos).

Se, por outro lado, você planejar atualizações de 18 meses a 30 meses, elas podem economizar muito. O hardware muda rapidamente e a tecnologia SAN ou de armazenamento também se move rápido. No ano passado, a maioria dos fornecedores agora oferece a deduplicação de SAN, que, por exemplo, recebe um 512kb em um hash criptografado de 128kb. Se esta solução de armazenamento for para recuperação de desastres, dependendo do orçamento, o sill de fitas faz um bom trabalho. Eles são mais lentos para restaurar, mas ainda funciona e não custa muito. Se os dados precisarem ser acessados, diariamente ou de tempos em tempos, as fitas provavelmente não serão uma ótima idéia.

Eu sugiro que você chame algum fornecedor de software como Commvault e Symantec e também Dell (EMC), HP, ... para a solução de hardware que eles sugerirão. Certifique-se de que esteja claro com seu cliente que tipo de tempo de restauração eles precisam e estão dispostos a pagar. A restauração desses dados é um par de dias de inatividade. Espero que isso possa ajudar.

    
por 04.04.2010 / 05:13
0

O ULTRASTOR ™ RS16 JS é um sistema de armazenamento JBOD de classe empresarial projetado para fornecer expansão de armazenamento para a premiada família ULTRASTOR ™ RS. Utilizando conectividade de host / disco ponto-a-ponto e discos SAS de alto desempenho, o ULTRASTOR ™ RS16 JS oferece solução de tolerância a falhas de nível corporativo e desempenho aprimorado para aplicativos que exigem nada menos que confiabilidade superior. Projetado para aceitar discos SAS de alta confiabilidade e discos SATA de alta capacidade, o novo ULTRASTOR ™ RS16 JS está se tornando o novo padrão para expansão de armazenamento corporativo.

Versatilidade do UltraStor ™ Com dois canais SAS e uma porta expansível SAS, o RS16 JS oferece capacidade de expansão essencial para a infraestrutura de TI de uma empresa. O ULTRASTOR ™ RS16 JS é ideal para aplicações com uso intensivo de dados e é alimentado por conexões de host SAS de ponta que maximizam o desempenho do disco, permitindo uma gama mais ampla de possibilidades de armazenamento. O RS16 JS funciona melhor quando conectado a um avançado sistema RAID da série ULTRASTOR ™ RS com expansão dinâmica de RAID on-line, permitindo que capacidade adicional seja adicionada sem a indisponibilidade total do sistema, aumentando a produtividade do seu departamento.

Principais recursos    x icon Design de compartimento sem cabos, de classe empresarial, com alimentação e refrigeração integradas    x icon As portas duplas Serial Attached SCSI de próxima geração produzem até 2.400MB / s de largura de banda    x icon O design de rack modular 3U integra-se facilmente a infraestruturas de armazenamento existentes    x icon Aceite uma combinação de unidades SAS de alta confiabilidade ou unidades SATA de alta capacidade    x icon Gerenciamento estendido de armazenamento através da Web GUI via TCP ou painel LCD

Larry Aguilar Melhorar a tecnologia (562) 777-3488 [email protected] link

    
por 22.04.2010 / 01:26