Ошибка: не найден подходящий метод для hadoopFile (String, Class<HibInputFormat>, Class<HipiImageHeader>, Class<FloatImage>)

Я использую HIPI с spark 2.0.2 для обработки изображений.

И я хочу загрузить изображения, хранящиеся в HipiImageBundle(.hib) на HDFS в RDD.

Поэтому я использую метод hadoopfile() для создания RDD, как показано в коде ниже:

SparkSession spark = SparkSession
          .builder()
          .appName("AppName")
          .getOrCreate();
JavaSparkContext jsc = new JavaSparkContext(spark.sparkContext());
JavaPairRDD<HipiImageHeader,FloatImage> floatimages = jsc.hadoopFile("hdfs://cluster-1-m/user/ibtissam/image.hib",HibInputFormat.class,HipiImageHeader.class,FloatImage.class);

Затем я получаю эту ошибку:

ошибка: не найдено подходящего метода для hadoopFile(String,Class,Class,Class)

Есть ли у вас идеи о том, как я могу решить эту проблему?

Ps: я использую:

  • Джава
  • Spark 2.0.2

0 ответов

Другие вопросы по тегам