Certifique-se de ter JAVA_HOME em spark-env.sh definido para a versão aberta do JDK que você instalou.
Eu instalei e verifiquei com o comando java -version , que deu a seguinte saída:
openjdk version "1.8.0_162"
OpenJDK Runtime Environment (build 1.8.0_162-8u162-b12-0ubuntu0.17.10.2-b12)
OpenJDK 64-Bit Server VM (build 25.162-b12, mixed mode)
Depois disso, baixei o Spark 2.3.0 e tentei instalá-lo. Na última etapa, quando estou tentando executar o comando no local:
$SPARK_PATH sbin/start-all.sh
A saída é como abaixo:
starting org.apache.spark.deploy.master.Master,
logging to /usr/lib/spark/spark-2.3.0-bin-hadoop2.7/logs/spark-- org.apache.spark.deploy.master.Master-1-ubuntu.out
failed to launch: nice -n 0 /usr/lib/spark/spark-2.3.0-bin-hadoop2.7/bin/spark-class org.apache.spark.deploy.master.Master --host ubuntu --port 7077 --webui-port 8080
/usr/lib/spark/spark-2.3.0-bin-hadoop2.7/bin/spark-class:
line 71: /usr/lib/java/jdk1.8.0_161/bin/java:
cannot execute binary file: Exec format error
Não sei o que sinto falta aqui.
Eu preciso de ajuda!
P.S: A saída de jps é:
14531 Worker
14568 Jps
Certifique-se de ter JAVA_HOME em spark-env.sh definido para a versão aberta do JDK que você instalou.