Cloudera Hive на Spark 2.x?

Глядя на это:

https://www.cloudera.com/documentation/spark2/latest/topics/spark2_known_issues.html

Подводя итог, он говорит, что Hive не работает на Spark 2.x в Cloudera.

Тем не менее, я предполагаю, что Hive работает на Spark 2.x в других дистрибутивах. Кто-нибудь настраивал CDH 5.10.x или выше для запуска Hive на Spark 2.x?

Является ли Spark 2.x большим шагом вперед от Spark 1.6?

Источник

1 ответ

Решение

Последняя выпущенная версия Hive на данный момент - 2.1.x, и она не поддерживает Spark 2.x (см. https://issues.apache.org/jira/browse/HIVE-14029). Когда выйдет версия Hive 2.2.0, она будет поддерживать Spark 2.x.

Источник
Другие вопросы по тегам