O hadoop cuida apenas do tamanho do HD do nó diferente?

1

Eu tenho um único nó (configuração pseudo-distribuída) e estou pensando em adicionar um segundo nó escravo. Importa se o escravo tem menos capacidade HD? O reequilíbrio levará isso para si? Eu não sou um especialista em HADOOP, de longe.

    
por millebii 07.05.2011 / 00:00

2 respostas

1

Não, não importa, mas o HDFS não irá redistribuir os blocos para o novo nó automaticamente, então você terá que fazer isso do seu lado. A maneira mais fácil é executar bin/start-balancer.sh . Além disso, antes de fazer qualquer rebalanceamento, certifique-se de modificar seus arquivos conf de acordo para acomodar a mudança de uma configuração pseudo-distribuída para um cluster um.

Verifique se a esta pergunta sobre as FAQs do Hadoop oferece mais formas de reequilibrar.

    
por 07.05.2011 / 02:36
0

O Hadoop equilibrará a carga. Além disso, você pode definir a propriedade "dfs.replication" para definir o número de replicações que deseja.

    
por 07.05.2011 / 02:06