Apache Toree Scala с CDH Kerberized кластером
Я долго тестировал ноутбук Jupyter с ядром Apache Toree Scala, но все еще не могу заставить его работать.
Мое ядро Scala теперь может выполнять только простые вычисления, но не подключаться к моему кластеру, хотя мой ноутбук Jupyter является одним из шлюзов кластера CDH 5.13.2 Spark 1.6...
Когда я набираю несколько строк, связанных со Spark, например:sc.parallelize(1 to 100).reduce(_+_)
всегда подсказывает следующее:
Name: org.apache.spark.SparkException Message: Job aborted due to stage failure: Task 0 in stage 0.0 failed 4 times, most recent failure: Lost task 0.3 in stage 0.0 (TID 6, <datanode>, executor 1): java.lang.RuntimeException: Stream '/jars/jars' was not found.
Я понятия не имею, что это значит Stream '/jars/jars'
, Могу ли я узнать, сталкивались ли ранее пользователи Stackru с этим? Заранее спасибо.
С уважением, Рука