Ошибка: не найден подходящий метод для hadoopFile (String, Class<HibInputFormat>, Class<HipiImageHeader>, Class<FloatImage>)
Я использую HIPI с spark 2.0.2 для обработки изображений.
И я хочу загрузить изображения, хранящиеся в HipiImageBundle(.hib) на HDFS в RDD.
Поэтому я использую метод hadoopfile() для создания RDD, как показано в коде ниже:
SparkSession spark = SparkSession
.builder()
.appName("AppName")
.getOrCreate();
JavaSparkContext jsc = new JavaSparkContext(spark.sparkContext());
JavaPairRDD<HipiImageHeader,FloatImage> floatimages = jsc.hadoopFile("hdfs://cluster-1-m/user/ibtissam/image.hib",HibInputFormat.class,HipiImageHeader.class,FloatImage.class);
Затем я получаю эту ошибку:
ошибка: не найдено подходящего метода для hadoopFile(String,Class,Class,Class)
Есть ли у вас идеи о том, как я могу решить эту проблему?
Ps: я использую:
- Джава
- Spark 2.0.2