Ne peut pas trouver l'étincelle soumettre lors de la saisie de l'étincelle-shell

J'ai suivi ce tutoriel pour installer étincelle pour scala:
https://www.tutorialspoint.com/apache_spark/apache_spark_installation.htm

Cependant, Lorsque j'essaie d'exécuter spark-shell je reçois cette erreur dans ma console. 

/usr/local/spark/bin/spark-shell: line 57: /usr/local/spark/bin/bin/spark-submit: No such file or directory

Mon bashrc ressemble à ceci:

export PATH = $PATH:/usr/local/spark/bin
export SCALA_HOME=/usr/local/scala/bin
export PYTHONPATH=$SPARK_HOME/python

Que suis-je donc arriver de mal? J'ai installé une étincelle pour python avant, mais maintenant, je suis en train d'utiliser scala. Est étincelle de confondre les variables? Merci.

  • Vous en avez un bin de trop dans le chemin de recherche: /usr/local/spark/bin/bin/spark-submit devrait être /usr/local/spark/bin/spark-submit. Qu'est-ce que votre étincelle à la maison?
  • Mon SPARK_HOME est définie comme la même chose que mon PATH, où mon spark-shell exécutable est
InformationsquelleAutor Curtis Chong | 2016-10-17
  1. 6

    Vous avez un bin de trop dans le chemin de recherche:

    /usr/local/spark/bin/bin/spark-submit

    devrait être

    /usr/local/spark/bin/spark-submit

    La SPARK_HOME devrait être /usr/local/spark/ dans votre cas, pas /usr/local/spark/bin/ comme cela semble être le cas aujourd'hui.

    InformationsquelleAutor Wilmerton
  2. 4

    Basé sur @Wilmerton réponse, je suis venu avec la suite de la configuration qui fonctionne à l'intérieur de mon ~/.bashrc:

    # Apache Spark stuff
export JAVA_HOME=/usr/lib/jvm/default-java/jre
export SPARK_HOME=/usr/lib/spark
export SCALA_HOME=/usr/local/scala/bin
export PATH=$PATH:${SPARK_HOME}/bin
export PATH=$PATH:$SCALA_HOME

    (J'ai installé default-jdk avec apt-get install default-jdk et aptitude search jdk les rendements les entrées suivantes avec différente de p statut:

    i   default-jdk                                        - Standard Java or Java compatible Development Kit
i A default-jdk-headless                               - Standard Java or Java compatible Development Kit (headless)
i A openjdk-8-jdk                                      - OpenJDK Development Kit (JDK)
i A openjdk-8-jdk-headless                             - OpenJDK Development Kit (JDK) (headless)
iBA openjdk-8-jre                                      - OpenJDK Java runtime, using Hotspot JIT
i A openjdk-8-jre-headless                             - OpenJDK Java runtime, using Hotspot JIT (headless)
i   openjdk-9-jdk-headless                             - OpenJDK Development Kit (JDK) (headless)
iB  openjdk-9-jre                                      - OpenJDK Java runtime, using Hotspot JIT
i A openjdk-9-jre-headless                             - OpenJDK Java runtime, using Hotspot JIT (headless)

    )

    • N'est-ce pas JAVA_HOME largement attendue pour pointer vers le répertoire d'installation de java et non pas le répertoire jre? Il devrait donc être JAVA_HOME=/usr/lib/jvm/default-java pas JAVA_HOME=/usr/lib/jvm/default-java/jre?
    InformationsquelleAutor Zelphir Kaltstahl
  3. 0

    Essayer de changer la deuxième variable d'environnement dans votre bashrc pour ce

    export PATH=$PATH:/usr/local/scala/bin

    Mon .bash_profile est à peu près la même que la vôtre, que j'utilise Path au lieu de SCALA_HOME

    InformationsquelleAutor Jake Henningsgaard