Ошибка подключения к Databricks с локального компьютера

Question

Я пытаюсь подключиться к Databricks со своего Mac(Мохаве).

Я сделал pip install -U databricks-connect==5.5.*

Я запускаю искровую оболочку, но когда я пытаюсь запросить искру, я получаю следующую ошибку

Вызвано: com.databricks.service.SparkServiceConnectionException: недопустимый токен

To connect to a Databricks cluster, you must specify an API token.
API Token: The API token used to confirm your identity to Databricks
  - Learn more about API tokens here: https://docs.databricks.com/api/latest/authentication.html#generate-a-token
  - Get current value: spark.conf.get("spark.databricks.service.token")
  - Set via conf: spark.conf.set("spark.databricks.service.token", <your API token>)
  - Set via environment variable: export DATABRICKS_API_TOKEN=<your API token>

Затем я запускаю spark.conf.get("spark.databricks.service.token") и возвращаю созданный мной токен. Мы пробовали использовать этот токен на машине с Windows, и он работает.

Answer 1

Бежать databricks-connect configure

следуйте инструкциям в командной строке, вам будет предложено ввести свой Databricks Token, введите свой токен, выполните оставшиеся шаги, и проблема должна быть решена.

PS- когда вас просят ввести свой Databricks Host: укажите общее имя хоста для региона, за которым следует ваш идентификатор организации

например, https://westeurope.azuredatabricks.net/?o=xxxx вместо https://adb-xxxx.xy.azuredatabricks.net/?o=xxxx