ADFV 2 Spark Activity с ошибкой выбрасывания Scala с кодом ошибки 2312

Question

Используя Azure Data Factory версии 2, мы создали Spark Activity (простой пример Hello World), но он выдает ошибку с кодом ошибки 2312

Наша конфигурация - кластер Hdinsight с озером данных Azure в качестве основного хранилища. Мы также попытались раскрутить кластер HDInsight с хранилищем BLOB-объектов Azure в качестве основного хранилища, и там мы столкнулись с той же проблемой.

Далее мы попытались заменить код Scala скриптом Python (простой пример hello world), но столкнулись с той же проблемой.

Кто-нибудь сталкивался с этой проблемой?

заранее спасибо

Answer 1

Возможно, уже слишком поздно, и вы уже решили свою проблему. Однако вы можете попробовать использовать лазурные блоки данных ниже. Создайте новый экземпляр блоков данных и запустите образец hello world в записной книжке. если он работает в ноутбуке, вызовите тот же ноутбук в adf. Надеюсь, это поможет

Answer 2

@Yogesh, вы пробовали отладить проблему с помощью ADF, выбрав Debug в качестве снимка экрана? Это может помочь вам определить точную первопричину. Я бы посоветовал попробовать использовать Spark-submit с jar в ящике Linux, чтобы выяснить точную причину. Кроме того, вы можете найти дополнительную информацию на https://docs.microsoft.com/en-us/azure/data-factory/data-factory-troubleshoot-guide