Описание тега spark-jobserver
NoneSpark-jobserver предоставляет интерфейс RESTful для отправки заданий Apache Spark, jar-файлов и контекстов заданий и управления ими.
Ссылка: https://github.com/spark-jobserver/spark-jobserver
Пример в реальном времени: https://nishutayaltech.blogspot.com/2016/05/how-to-run-spark-job-server-and-spark.html