Создание таблицы с использованием Apache Spark в формате delta застряло
Я хочу создать таблицу, используя местоположение дельты, но мой процесс застрял.
spark.sql("CREATE TABLE bronze_table USING DELTA LOCATION 'dbfs:/mnt/poc-databricks-folder/bronze/delta'")
... Запуск команды
Процесс не завершен, я запустил это 24 часа назад, и он все еще находится в "Запуск команды". У меня запущено потоковое задание, которое без проблем хранит дельта-формат в пути.
Я вижу каталог искр.
Моя проблема в том, что процесс создания таблицы с использованием предыдущего пути застрял, и я хотел бы знать причину. Я попытался перезапустить кластер, удалить все из папки, удалить базы данных, удалить таблицы, но у меня та же проблема.