Есть ли в Google Colab индикатор выполнения Spark?
Databricks предлагает индикатор выполнения для вычислительных дорогостоящих задач pyspark. К сожалению, я не вижу ничего подобного при использовании Google Colab.
Чтобы получить желаемую информацию, я установил модуль pixiedust, так как в нем есть индикатор выполнения Spark. Но когда я включаю монитор искры с
pixiedust.enableJobMonitor()
он не может найти функцию.
Есть ли еще один вариант получить монитор выполнения искровых работ?
С уважением,
Muenzi