Perguntas sobre 'hdfs'

Tags
1
resposta

Hadoop hdfs namenode está jogando um erro

Lista completa de erros: hb@localhost:/etc/hadoop/conf$ sudo service hadoop-hdfs-namenode start * Starting Hadoop namenode: starting namenode, logging to /var/log/hadoop-hdfs/hadoop-hdfs-namenode-localhost.out 12/09/10 14:41:09 INFO namenod...
10.09.2012 / 11:14
1
resposta

A mudança do fator de replicação HDFS padrão de 3 afeta o desempenho do mapeador?

Tenha uma configuração de cluster do HDFS / Hadoop e estou pensando no ajuste. Gostaria de saber se a alteração do fator de replicação HDFS padrão (padrão: 3) para algo maior melhorará o desempenho do mapeador, com o óbvio custo de aumentar o...
29.06.2011 / 17:57
0
respostas

“O volume de um arquivo foi alterado externamente…” e a configuração de tamanhos de arquivos em gravação no NFS a partir do Windows

Eu configurei o acesso do NFS ao HDFS. Eu posso me conectar ao compartilhamento raiz padrão dos clientes Windows e Linux e todos os clientes podem ler o compartilhamento. Escrever a partir do cliente Linux também está ok. Quando tento copi...
22.07.2014 / 16:37
1
resposta

Rhadoop hdfs.init () Erro

Eu instalei recentemente o CDH5.1.0 juntamente com o R 3.1. *, e instalei o rmr2, o rJava e o rhdfs corretamente. (juntamente com os pacotes necessários e definir as variáveis de ambiente necessárias) Após alguns problemas com a instalação de rh...
29.07.2014 / 21:06
1
resposta

mount.nfs: falha na chamada do sistema de montagem

Estou tentando montar hdfs em minha máquina local executando o Ubuntu usando o seguinte comando: --- sudo mount -t nfs -o vers=3,proto=tcp,nolock 192.168.170.52:/ /mnt/hdfs_mount/ Mas estou recebendo este erro: - mount.nfs: mount sys...
28.06.2017 / 08:23
1
resposta

Exibindo o tráfego de rede NxN em um sistema distribuído

Eu tenho um cluster do Hadoop configurado, e gostaria de ver o uso da rede entre todos os nós neste cluster, ou seja, se eu tiver N nós, quero ver conexões de rede NxN para que eu possa ver todo o tráfego entre todos nós. Estou executando o c...
12.03.2015 / 03:15
2
respostas

Hadoop DataNode está me dando um ID incompatível de namespace

Quando executo o script start-all.sh do meu nó mestre, alguns dos meus DataNodes não são iniciados; o arquivo de log relata uma IOException Java: IDs de namespace incompatíveis em / tmp / $ MY_USER_NAME.     
28.06.2012 / 20:07
1
resposta

Qual versão do HDFS é compatível com o HBase estável?

O HBase stable é atualmente o hbase-0.90.4, que versão (s) do HDFS é compatível com?     
21.12.2011 / 03:44
1
resposta

Processando arquivos de log preexistentes com o Flume

Eu tenho um grande conjunto de arquivos de log dos quais preciso extrair dados. É possível usar o Flume para ler esses arquivos e despejá-los em um HDFS (Cassandra ou outra fonte de dados) que eu possa consultar? A documentação parece sugerir...
23.08.2011 / 20:28
0
respostas

Exemplo de saída de rúmen ou entrada para o Gridmix

Eu quero ver os registros do JobHistory, que podem ser alimentados como entrada para o Rúmen . Mais especificamente, estou interessado em saber o formato de entrada para o Gridmix . Eu tentei seguir duas coisas para isso: 1) Eu encontrei...
06.04.2018 / 22:24