Perguntas sobre 'hadoop'

Tags
O Apache Hadoop é uma estrutura de software que suporta aplicativos distribuídos com uso intensivo de dados sob uma licença gratuita. Ele permite que os aplicativos trabalhem com milhares de computadores independentes e petabytes de dados. O Hadoop foi derivado dos documentos MapReduce e Google File System (GFS) do Google.
1
resposta

Ambari e Spark não podem iniciar a partir do CLI

Na GUI do Ambari, não podemos iniciar o serviço Spark. Então, queremos iniciá-lo por linha de comando da seguinte forma: [spark@mas01 spark2]$ ./sbin/start-thriftserver.sh --master yarn-client --executor-memory 512m --hiveconf hive.server2.th...
02.08.2017 / 20:57
1
resposta

Passando argumentos em linha para o shell script sendo executado no HDFS

Estou executando um shell script armazenado no HDFS (para que possa ser reconhecido pelo meu fluxo de trabalho oozie). para executar este script que estou usando hadoop fs -cat script.sh |exec sh No entanto, preciso passar argumentos in...
06.07.2017 / 18:47
1
resposta

Como fazer upload do arquivo para o File View no Ambari Web?

Estou usando o HDP 2.6 e o ambari 2.5. em um cluster de 5 nós. O cluster foi configurado com vagrant seguindo estas instruções link . A caixa de base é o Centos 7.0 Minha máquina host está executando o Centos 7.3 Estou tentando usar...
01.06.2017 / 01:55
1
resposta

Como instalo um .rpm que falha com um erro sobre um arquivo .so não encontrado no Python 2.6?

Quando tento instalar o cloudera-manager-agent 5.7 de um .rpm, recebo um erro. O erro diz que uma dependência não foi atendida porque o yum não conseguiu encontrar o libpython2.6.so.1.0 (64 bits). Eu esperaria que o Python 2.7 fosse suportado co...
24.12.2016 / 01:23
3
respostas

Como dividir o intervalo de datas em dias usando o script

Eu tenho esta entrada: startdate end date val1 val2 2015-10-13 07:00:02 2015-10-19 00:00:00 45 1900 em que uma linha especifica um período que abrange vários dias, e eu quero dividir o intervalo em p...
21.10.2016 / 23:27
1
resposta

copyFromLocal Hadoop Nenhum erro de arquivo ou diretório

Eu tenho o seguinte código do terminal de comando do Fedora: [root@localhost python_code]# pwd /root/python_code [root@localhost python_code]# cd .. [root@localhost ~]# ls anaconda-ks.cfg python_code [root@localhost ~]# cd /usr/local [root@l...
30.04.2016 / 06:52