Как интегрировать Eclipse IDE с кластером Databricks
Я пытаюсь интегрировать свою IDE Scala Eclipse с моим кластером Azure Databricks, чтобы я мог напрямую запускать свою программу Spark через Eclipse IDE в моем кластере Databricks.
Я следил за официальной документацией Databricks Connect (https://docs.databricks.com/dev-tools/databricks-connect.html) . У меня: Установлена Анаконда. Установлены Python Lib 3.7 и библиотека Databricks Connect 6.0.1. Была ли часть конфигурации подключения Databricks (часть CLI) . Также добавлены клиентские библиотеки в Eclipse IDE. Установите SPARK_HOME env. переменная в путь, который я получаю от запуска команды в Anaconda, то есть 'databricks-connect get-jar-dir'
Я не устанавливал никаких других переменных среды, кроме упомянутой выше.
Нужна помощь в поиске того, что еще нужно сделать для выполнения этой интеграции, например, как ENV. переменная, связанная с подключением, работает при работе через IDE.
Если кто-то уже сделал это успешно, пожалуйста, помогите мне.