Загрузка ресурсов в spark-shell

Question

Загрузка ресурсов в spark-shell

Обычно загрузка ресурсов в Scala REPL выполняется следующим образом:

getClass().getClassLoader().getResource("/resource-file")

посмотреть здесь

но это не находит ресурсы из банок, которые я загружаю, используя обычный запуск

spark-shell --jars list-of-jars

Как загружаются ресурсы в spark-shell? (Я ссылаюсь на неправильный ClassLoader?)

2

scala apache-spark read-eval-print-loop

Источник

user525369 31 мар '16 в 14:53

1 ответ

Решение

Другие вопросы по тегам scala apache-spark read-eval-print-loop

user1038826 31 мар '16 в 21:30 2016-03-31 21:30 · Accepted Answer · 2016-03-31 21:30

Пожалуйста, удалите префикс "/". Я тестировал в оболочке Spark и оба getClass().getClassLoader().getResource("resource-file") а также Thread.currentThread().getContextClassLoader().getResource("resource-file") работал. Тем не менее, я бы порекомендовал использовать Thread.currentThread().getContextClassLoader() так как это не зависит от того, что getClass() возвращается.