Perguntas sobre 'hadoop'

Tags
O Apache Hadoop é uma estrutura de software que suporta aplicativos distribuídos com uso intensivo de dados sob uma licença gratuita. Ele permite que os aplicativos trabalhem com milhares de computadores independentes e petabytes de dados. O Hadoop foi derivado dos documentos MapReduce e Google File System (GFS) do Google.
2
respostas

Não é possível enviar arquivos via SCP

Eu tentei usar o comando scp com a opção -i para transferir o arquivo da máquina local para a instância remota do EC2: Akhis-Macbook-Pro:~ aswinakhilesh$ sudo scp -i Mykey.pem FileA [email protected]:/home...
15.03.2014 / 08:02
1
resposta

Como posso acessar a interface da web de gânglios com tunelamento ssh para monitorar meu trabalho de EMR?

Eu tenho usado as ferramentas de monitoramento hadoop padrão com: ssh -L 9100:localhost:9100 -L 9101:localhost:9101 -o ServerAliveInterval=10 -o StrictHostKeyChecking=no -i key.pem [email protected] E, em segui...
17.03.2013 / 03:17
1
resposta

JAVA_HOME não definido corretamente

Estou tentando configurar o hadoop no cygwin. Eu defini JAVA_HOME como /cygdrive/c/work/java/jdk1.6.0_30 Se eu fizer eco de $JAVA_HOME , ele será exibido corretamente. Se eu executar o comando bin/hadoop version , será exibida a seg...
16.01.2013 / 10:54
0
respostas

Você pode conectar duas caixas GNOME via ssh?

Estou tentando configurar o cluster Hadoop de 2 nós usando dois computadores portáteis com caixas GNOME, ambos executando o Ubuntu 17.10. Os dois laptops são conectados ao mesmo wifi, mas as caixas do GNOME sozinhas não estão conectadas ao wifi....
02.07.2018 / 14:37
2
respostas

Escravo: ssh: conectar à porta escrava do host 22: Tempo limite da conexão esgotado

eu fiz com cluster de nó único em duas máquinas diferentes, eu fiz um como mestre (192.168.1.1) e outro m / c como escravo (192.168.1.2), eu sou capaz de ping com sucesso entre duas máquinas, eu fizeram as seguintes alterações para entrar no clu...
11.09.2013 / 08:58
2
respostas

Não é possível usar o SSH, não é possível criar /dev/null/.ssh

Estou tentando implantar o hadoop com um nó mestre e escravo. Mas o mestre falha ao iniciar os processos de tasttracker e datanode em escravos, já que não é capaz de ssh em escravos. A mensagem de erro é 'Não foi possível criar /dev/null/.ssh'....
13.07.2014 / 08:16
1
resposta

Verifique o status do Oozie no UNIX

Utilitário Hadoop Admin Criado um utilitário básico de administração de hadoop que verifica o status de saúde e oozie do dfs. Verificando o status da oozie No meu utilitário acima, estou usando o comando abaixo: bin/oozie admin -...
09.05.2013 / 13:10
1
resposta

Executando o Hadoop no Windows 8

A execução da estrutura do Hadoop no Windows é sempre uma tarefa difícil usando o Cygwin. O processo é semelhante para o Windows 8, assim como o Windows 7, como mencionado aqui ou é diferente? link     
20.10.2012 / 07:00
1
resposta

Desativar o RAID Controller no BOOT e particionar cada disco

Eu tenho alguns servidores HP Proliants decentes que vêm com o "Controlador HP Smart Array P410i" habilitado, estou usando essas caixas para configurar um cluster Hadoop e eu sei, o RAID é com certeza um não-não para o Hadoop desde o aplicativo...
30.05.2014 / 17:28
1
resposta

Configurando os resultados do hadoop em “/ bin / java: não existe tal arquivo ou diretório”

Estou tentando instalar o hadoop no Cygwin. Eu defini JAVA_HOME da seguinte forma: \cygdrive\c\work\java\jdk1.6.0_30 no arquivo conf/hadoop-env.sh . A execução de um echo $JAVA_HOME também é exibida corretamente mas o co...
17.01.2013 / 09:48