Неисправности Spark не работают с объектом dbutils
Почему я не могу сделать что-то подобное?
import spark.implicits._
dbutils.fs.ls(folderName).toDF
выдает ошибку
value toDF is not a member of Seq[com.databricks.backend.daemon.dbutils.FileInfo]
Но в блокноте с данными работает нормально. Может ли кто-нибудь посоветовать, что мне не хватает?
Я использую следующую библиотеку "com.databricks" %% "dbutils-api" % "0.0.4"
1 ответ
На соответствующей странице Databricks:
DBUtils не поддерживаются вне ноутбуков