Как собрать zeppelin 0.8.0 со встроенной искрой 2.3.2
Я хочу собрать zeppelin 0.8.0 со встроенной искрой 2.3.2 и запустить ее на той же версии spark, работающей не локально, без установки SPARK_HOME, чтобы мне не требовалось устанавливать SPARK на узле zeppelin. Я пробовал варианты сборки, приведенные в документе https://zeppelin.apache.org/docs/0.8.0/setup/basics/how_to_build.html но он не удается собрать, пытаясь собрать для scala 2.10.
Возможно ли это с версией 0.8.0?
Таким образом, вы можете создать снимок 0.8.1 с помощью spark 2.3.2. Но, однако, вы не можете подключиться к внешнему искровому узлу, используя встроенные двоичные файлы искры, не предоставив отдельную установку искры с помощью SPARK_HOME.
1 ответ
Вы можете объединить код из этого запроса на извлечение, и тогда профиль spark-2.3 будет создан с использованием версии 2.3.2 spark и не завершится с ошибкой scala 2.10.
Или подождите 0.8.1 ( первый кандидат был отмечен сегодня!)