scala.reflect.internal.MissingRequirement Ошибка
Я запускаю искровую работу в кластере и получаю это
scala.reflect.internal.MissingRequirementError: class sf.dat.hadoop.dmv.auto.beans.DMVRecord in JavaMirror with sun.misc.Launcher$AppClassLoader@aede59e of type class sun.misc.Launcher$AppClassLoader with classpath[...class list...] not found
Что странно, он отлично работает на моем ноутбуке с той же версией scala и spark. Я читал, что это может быть ошибкой сериализации, и я пробовал те исправления, которые предлагают использовать kryo, но ошибка все еще сохраняется. Я также включил скала-отражение в моем ПОМ. Я использую scala 2.10.6 и spark 1.6.3, поэтому обновление до версии spark 2+ невозможно, поскольку я не являюсь владельцем кластера.