Искра с пользовательскими привязками улья

Как я могу создать искру с текущими (улей 2.1) привязками вместо 1.2? http://spark.apache.org/docs/latest/building-spark.html Не упоминается, как это работает. Хорошо ли работает свеча с ульем 2.x?

Источник

1 ответ

У меня был тот же вопрос, и это то, что я нашел до сих пор. Вы можете попробовать создать искру с более новой версией улья:

mvn -Dhive.group=org.apache.hive -Dhive.version=2.1.0 clean package

Это выполняется в течение длительного времени и не проходит в модульных тестах. Если вы пропустите тесты, вы получите немного больше, но потом столкнетесь с ошибками компиляции. Таким образом, искра не работает хорошо с улья 2.x!

Я также искал в ASF Jira Spark и Hive и не нашел упоминаний об обновлении. Это ближайший билет, который мне удалось найти: https://issues.apache.org/jira/browse/SPARK-15691

Источник
Другие вопросы по тегам