Объект SparkSession не является членом пакета org.apache.spark.sql

Question

Объект SparkSession не является членом пакета org.apache.spark.sql

Я пытаюсь использовать последнюю версию Spark API с SparkSession.

Пока я импортирую пакет, мое затмение показывает сообщение об ошибке во вложении.

Я использую 2.10.6 Scala компилятор.

Пожалуйста, помогите мне решить эту проблему.

код

2

scala apache-spark apache-spark-sql spark-dataframe hadoop2

Источник

user4841977 28 дек '16 в 16:27

1 ответ

Другие вопросы по тегам scala apache-spark apache-spark-sql spark-dataframe hadoop2

user7344209 02 янв '17 в 23:30 2017-01-02 23:30 · Answer 1 · 2017-01-02 23:30

Ваша версия, указанная в Maven, слишком старая. SparkSession представлен в Spark 2.0. Вам нужно использовать Spark 2.0.0 или более позднюю версию, чтобы импортировать его. Ответы на вопрос ниже могут помочь вам настроить детали:

Что такое версия библиотеки поддерживаемых искрой SparkSession